关闭

hadoop hdfs 文件与分块理解

标签: hadoop集群任务
688人阅读 评论(0) 收藏 举报
分类:

hadoop fsck / -files -blocks

会告诉集群中块的分配情况

当集群中的datanode数小于3时,块的复制份数也不会超过3

分析结果是:文件不够一个块的大小时,也单独占用一个块。

查看map源码,map任务也不会跨文件处理

两个文件不会共用一个块
0
0

查看评论
* 以上用户言论只代表其个人观点,不代表CSDN网站的观点或立场
    个人资料
    • 访问:298473次
    • 积分:4142
    • 等级:
    • 排名:第7433名
    • 原创:138篇
    • 转载:30篇
    • 译文:0篇
    • 评论:4条
    文章分类
    最新评论