测试hadoop

首先你要理解hadoop世界中的 文件系统 HDFS 和 我们常用的文件系统(FAT EXT NTFS)不是同一个概念。

1 给HDFS 建一个 input 文件夹(放数据) output 文件夹(出结果)
hadoop fs -mkdir -p /user/root/input
2 通过命名把本地文件系统的数据 放到 HDFS 里面 的input 文件夹 里面
hadoop fs -put /usr/hadoop/input/* /user/root/input
3 运行你的job
4 到output里面去查看结果 ,通常是通过url 访问

可能需要用到的命名
删除HDFS input文件夹
hadoop fs -rm -r /user/root/input


检查你的节点状态

[img]http://dl2.iteye.com/upload/attachment/0119/2018/5da134fd-f7bd-3f66-b89f-9d1bdec15894.png[/img]

检查整个集群的情况
http://192.168.0.105:50070/


output已经存在

[img]http://dl2.iteye.com/upload/attachment/0119/2022/196d7c5e-7619-3b7a-bb5b-ac6ab7eeea5c.png[/img]