Hadoop
文章平均质量分 53
woshiren123ew
这个作者很懒,什么都没留下…
展开
-
启动hdfs文件系统后,Browse the filesystem链接打不开
hdfs启动成功后,访问host:50070正常,点击browse the filesystem后,链接打不开 原因是网页转向的地址用的是hadoop集群的某一个datanode的主机名,如node2:50075/browseDirectory。由于客户端的浏览器无法解析node2这个主机名,因此该页无法显示。解决办法:需要在客户端的hosts文件里加入hadoop集群的ip地址与对应的主机原创 2017-02-19 17:09:56 · 1280 阅读 · 0 评论 -
HDFS问题
问题1、为什么client在向第一个dataNode写入数据后,第一个dataNode不以并行的方式向第二个和第三个dataNode写数据 问题2、如果文件的大小大于block的大小,那么写入第二个block是在第一个block返回ack packet时,还是写完第一个dataNode的block时,或者是需要重新找到三个namenode来写入下一个block 问题三、客户端向第一个dataN原创 2017-02-17 18:47:03 · 739 阅读 · 0 评论 -
HDFS注意点
unlike a filesystem for a single disk, a file in HDFS that is smaller than a single block dose not occupy a full block's worth of underlying storage.(For example, a 1MB file stored with a block siz...原创 2018-12-12 20:07:51 · 207 阅读 · 0 评论