hadoop
文章平均质量分 73
elegant0124
这个作者很懒,什么都没留下…
展开
-
Hadoop对输入文件划分(InputFormat)
适用Hadoop很长时间了,从最开始的学习到深入源码解析,原创 2014-09-21 20:38:33 · 478 阅读 · 0 评论 -
Hadoop关于处理大量小文件的问题和解决办法(2)--CombineFileInputFormat
针对上篇Hadoop关于处理大量小文件的问题和解决办法原创 2014-09-22 15:12:00 · 531 阅读 · 0 评论 -
Hadoop关于处理大量小文件的问题和解决方法
摘要:小文件指的是那些size比HDFS 的block size(默认64M)小的多的文件。如果在HDFS中存储小文件,那么在HDFS中肯定会含有许许多多这样的小文件(不然就不会用hadoop了)。 而HDFS的问题在于无法很有效的处小文件指的是那些size比HDFS的block size(默认64M)小的多的文件。如果在HDFS中存储小文件,那么在HDFS中肯定会含有许许多多这样的小文件转载 2014-09-22 12:47:18 · 380 阅读 · 0 评论 -
hadoop动态增加和删除节点
hadoop集群在使用中可能会动态的增加或者删除节点,原创 2014-10-25 22:54:39 · 654 阅读 · 0 评论