Spark：hadoop HDFS

使用HDFS首先打开HDFS组件，如果有集群的话，则集群的hdfs都会被打开。

./hadoop/sbin/start-dfs.sh

如果第一次使用HDFS的话，需要创建一个工作目录，这个目录只存在于hdfs文件系统中，并不会在你的系统文件中出现。

./hadoop/bin/hdfs dfs -mkdir -p /user/your_ubuntu_username

使用ls命令可以查看当前hdfs文件系统中的内容

./hadoop/bin/hdfs dfs -ls /user/your_ubuntu_username

使用put命令可以将本地文件上传至hdfs文件系统中

./hadoop/bin/hdfs dfs -put /your_localfile_path /user/your_ubuntu_username/

使用hdfs中的文件可以用以下路径

hdfs://localhost:9000/user/your_ubuntu_username/your_file.txt

当然删除文件可以用-rm -rf关闭可以用

./hadoop/sbin/stop-dfs.sh