hadoop
yjh314
这个作者很懒,什么都没留下…
展开
-
HDFS的dataNode节点启动不起来
我把HDFS文件系统里的文件目录全部删掉后,在重新启动hadoop, dataNode节点启动不起来之后重新删除hadoop的缓存文件,在格式化重启解决,操作如下:rm -rf /home/hadoop/hd_space/hdfs/data/*rm -rf /home/hadoop/hd_space/hdfs/name/*rm -rf /home/hadoop/hd_space/map原创 2017-01-12 17:25:45 · 2652 阅读 · 0 评论 -
hdfs 采用append方式追加数据时报错
问题描述:使用hdfs文件append的方式合并文件:FSDataOutputStream out = fileSystem.append(desPath, Parameters.BUFFER_SIZE);在out close时报错:Java.io.IOException: Failed to replace a bad datanode on the existing pip转载 2017-09-05 11:22:28 · 986 阅读 · 0 评论 -
hdfs写入无权限解决方法
[2017-11-08 16:04:59,686] WARN hdfs.FileSystemManager: 打开文件流,创建文件:test_part-0000失败:org.apache.hadoop.security.AccessControlException: Permission denied: user=root, access=WRITE, inode="/user/data/test原创 2017-11-08 19:28:26 · 5029 阅读 · 1 评论