spark实验遇到的问题

问题1.0.0.0.0.8032
这种问题一般是自己配置出错了，仔细检查前面的配置信息（从前到后，即使是前面配置的，也很可能当前错误是由它造成的，因为前面的运行案例都没有使用到这个配置信息），包括字母出错都可能导致这种情况。检查完成之后再重新启动一次集群。不要去尝试改变yarn集群配置(比如在yarn-site.xml中加上master:8032…)，只要你之前yarn是正常启动了的，后面一般都不会修改yarn来纠正错误。除非确实该软件需要配置yarn时（如hadoop）.
问题2.idea编辑java程序包出错
当idea碰到不能代码补全和提示什么地方出错了时，很可能是你打开了省电模式。解决：file->power save mode(点击让他关闭即可）
问题3.sbt速度慢，仓库换华为云也不行
sbt打包文件时，如果是刚开始使用，使用时需要下载一些编译和运行需要的源文件，因为最初访问的是国外的仓库，所以其下载非常慢，之后查看资料：将下载的仓库改为华为云，但是还是非常慢。 解决：将仓库改为阿里云

$ cd ~
$ mkdir .sbt   #如果该目录已经存在，就不用创建了
$ cd .sbt
$ vim repositories  #使用vim编辑器创建repositories文件，在文件中添加如下内容

[repositories]
local
aliyun: https://maven.aliyun.com/nexus/content/groups/public/
typesafe: https://repo.typesafe.com/typesafe/ivy-releases/, [organization]/[module]/(scala_[scalaVersion]/)(sbt_[sbtVersion]/)[revision]/[type]s/[artifact](-[classifier]).[ext], bootOnly
sonatype-oss-releases
maven-central
sonatype-oss-snapshots

#修改SBT配置文件。
$ vim /usr/local/sbt/conf/sbtopts    # 在末尾新增如下一行
-Dsbt.override.build.repos=true

问题4.idea代码引入hdfs =>textfile
hdfs引入正确格式：hdfs://node1:8020/test/input