今天通过Hadoop来运行第一个程序,来统计一篇文章中不同英文单词的个数。
1.创建一个 t1.txt 文件夹,并将你要统计的文章粘贴进去。(这里是将txt文件创建在E盘中,跟Hadoop文件同处于一个盘)
2.在命令提示符下 Hadoop-2.7.3\sbin 中输入 start-all.cmd 开启Hadoop服务
3.准备输入、输出文件夹,在HDFS文件系统中创建。
Hadoop中所有的数据都必须放在HDFS文件系统中进行处理。
命令提示符中 Hadoop-2.7.3\sbin 下输入 hadoop fs -mkdir hdfs://localhost:9000/test/input(创建文件夹,localhost:9000为hdfs的系统目录,test和input是现在要创建的文件名)
输入 hadoop fs -ls hdfs://localhost:9000/test/ 查看文件是否创建成功
4.上传需要统计的 t1 文件到 hdfs://localhost:9000/test/input 上
hadoop fs -put E:\