- 博客(2)
- 收藏
- 关注
原创 在hadoop上跑python文件报错路径不存在
网上有很多帖子写一个简单的测试py文件,写好之后执行时有几个坑来记录一下。hadoop2.7之后streaming文件的路径在$HADOOP_HOME/share/tools/lib我执行hdfs dfs -ls /test/code/ 返回我的两个文件,并且我都给了777的权限。他依旧报错。需要在文件路径前面加上“hdfs:///” 声明文件路径。执行命令:had
2018-01-07 16:47:48 1242
原创 在vm上部署hadoop
在vm上部署hadoop成功,记录一下。已经有很多关于部署hadoop的帖子,我也看了很多,有一个坑是关于伪分布式和完全分布式。看了很多帖子,虽然关于配置的内容都不相同,但是按照帖子配置都可以成功。我的问题出在master节点成功启动DataNode没有启动,百度一下都是关于报错信息的处理,我的DataNode没有任何日志,node01配置成SecondaryNameNode可以正常启动,说明
2018-01-06 12:03:12 1774 1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人