- 博客(2)
- 收藏
- 关注
原创 Error executing Jupyter command 'WordCount.py': [Errno 2] No such file or directory
因为课程要求,最近疯狂搭建hadoop集群和spark环境,遇到一些问题,特此记录。问题描述:搭建了pycharm+pyspark环境之后,想测试下上传测试文件到HDFS目录,输入命令HADOOP_CONF_DIR=/root/app/hadoop/etc/hadoop spark-submit --driver-memory 512m --executor-cores 2 --master ...
2020-04-21 12:08:50 301
原创 hdfs.DFSClient: Exception in createBlockOutputStream java.net.NoRouteToHostException: 没有到主机的路由
因为课程要求,最近疯狂搭建hadoop集群和spark环境,遇到一些问题,特此记录。问题描述:上传文本文件到HDFS 失败(PS:我曾经上传成功,所以我的hadoop环境没有问题)命令:hadoop fs -mkdir -p /input/wchadoop -put LICENSE.txt /input/wc报错界面:自查:防火墙是否关闭(主从机都要关闭)systemctl ...
2020-04-19 20:44:19 1512
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人