- 博客(1)
- 收藏
- 关注
RSS订阅原创 大数据概念复习-HDFS（第一天）
block大小的影响 HDFS中块的大小默认是128M，也可以根据节点的磁盘传输速率进行设置，通过设置dfs.blocksize来实现； 如果设置过大，则可能数据都存在一个节点上，在处理数据时，没法提现出分布式的特点，因为任务只在存有数据的这一个节点上执行，并且处理数据的时间也会变长； 如果设置过小，会占用namenode中的内存，并且寻址时间也会增加。 如何计算出128M HDFS的寻址时间一般...
2020-03-08 00:31:01
212
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人