Note:Hadoop先需要运行在 伪分布式 或 完全分布式 下。
hdfs文件系统现已可以使用。
hadoop 是根据URI来识别文件系统类型的。 所有跟文件和目录相关的操作可以通过 Hadoop fs -help 查询。
几个基本操作如下:
- 从本地文件系统拷贝文件到 hdfs中 :
hadoop fs -copyFromLocal input/docs/quangle.txt hdfs://localhost/user/tom/quangle.txt
由于已经设置默认文件系统是hdfs,那么可以之间使用:hadoop fs -copyFromLocal input/docs/quangle.txt /user/tom/quangle.txt
hadoop fs -mkdir books
hadoop fs -ls
Java接口 : FileSystem
FileSystem API 可以根据 URI 辨别hadoop使用的是哪个文件系统。
注意:运行程序时需要动态指定 HADOOP_CLASSPATH=**.jar