- 博客(5)
- 资源 (3)
- 问答 (1)
- 收藏
- 关注
RSS订阅转载 namenode磁盘满引发recover edits文件报错
前段时间公司hadoop集群宕机，发现是namenode磁盘满了, 清理出部分空间后，重启集群时，重启失败。又发现集群Secondary namenode 服务也恰恰坏掉，导致所有的操作log持续写入edits.new 文件，等集群宕机的时候文件大小已经达到了丧心病狂的70G+..重启集群报错 加载edits文件失败。分析加载文件报错原因是磁盘不足导致最后写入的log只写入一半就宕机了。由
2015-01-31 23:21:35
2354
原创 Out of memory due to hash maps used in map-side aggregation解决办法
在运行一个group by的sql时，抛出以下错误信息：Task with the most failures(4): -----Task ID: task_201411191723_723592_m_000004URL: http://DDS0204.dratio:50030/taskdetails.jsp?jobid=job_201411191723_723
2015-01-28 16:13:57
1702
转载 Bigtable：一个分布式的结构化数据存储系统
Bigtable：一个分布式的结构化数据存储系统本文的英文原文为Google在2006年发布的Google Bigtable paper本文的翻译版本由Alex完成,原文地址为: http://blademaster.ixiezi.com/这是我很长时间以来一直想要翻译的文章,不过由于其文太长,以及本人精力有限,未能如愿,今天偶遇此文,感觉译者此文的翻译已远远超
2015-01-27 18:41:03
2738
转载 Google File System中文版
英文原文地址: Google File system译文原文地址: The Google File System中文版The Google File System中文版By Alex摘要我们设计并实现了Google GFS文件系统，一个面向大规模数据密集型应用的、可伸缩的分布式文件系统。GFS虽然运行在廉价的普遍硬件设备上，但是它依然了提供灾难冗余的能力，为
2015-01-27 16:17:35
1671
转载 Google MapReduce中文版
英文原文链接: Google Map Reduce译文原文链接: Google MapReduce中文版Google MapReduce中文版译者: alex摘要MapReduce是一个编程模型，也是一个处理和生成超大数据集的算法模型的相关实现。用户首先创建一个Map函数处理一个基于 key/value pair的数据集合，输出中间的基于key/value
2015-01-27 16:15:04
1947
ippicv_linux_20151201.tgz
2018-04-07
如何在线试用Demo？
2021-01-07
TA创建的收藏夹 TA关注的收藏夹
TA关注的人