1.从hdfs中读取一个文件
val path =
"hdfs://master:9000/examples/examples/src/main/resources/people.txt"
val rdd1
=
sc.textFile(path,
2
)
从HDFS中读取文件的形式和本地上一样,只是前面的路径要表明是HDFS中的
2.查看hdfs上的文件:
hdfs dfs -ls /xj6500
3.在hdfs上创建目录:
hdfs dfs -mkdir /xj6500/test
4.上传hdfs文件:
hdfs dfs -put /opt/spacewalk/inventory.txt /xj6500/test
5.删除hdfs文件:
hdfs dfs
-rm -r /user/hadoop/output
6.查看hdfs默认服务+端口:
hdfs getconf -confKey fs.default.name