本文介绍了在运行Spark和Hadoop时遇到的一些错误及其解决办法，包括启动Spark的步骤，解决Hadoop用户权限问题，处理InconsistentFSStateException，修复datanode的clusterID不匹配，使用dfsadmin命令查看datanode状态，以及使用hadoop命令进行文件操作如复制、删除和上传等。
1.
单机运行spark
启动spark：
./sbin/start-master.sh
启动worker:
./bin/spark-class org.apache.spark.deploy.worker.Worker spark://gry-VirtualBox:7077 （通过localhost:8080得到）
提交jar包：
./bin/spark-submit --master spark://gry-VirtualBox:7077 --class WordCount /home/gry/submitJars/test.jar
最低0.47元/天 解锁文章
1374
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
