文章标题 spark读取文件过程中发现的问题解决记录
spark读取本地文件的方式是给路径加上file://,例如sc.textFile(“/opt/software/spark1.4/README.md”),我发现一个问题就是,我的spark软件安装在/opt/software下,我读取/opt/software目录下的文件不报错,可以正常读取,但是我想把spark机器学习这本书上的例子做一下,于是我下载了MovieLens的数据集,并且把它放在/h
原创
2016-10-27 12:20:09 ·
1764 阅读 ·
0 评论