在eclipse新建一个java的项目,然后在根目录创建一个新的文件夹
把hadoop所需要的jar包导入
hdfs dfs -help查看所有基本的dfs命令
9000端口是NameNode的RPC端口,50070是NameNode的http端口
1、把hadoop-2.6.5上传上去
2、创建一个lib放置jar包的地方,然后把hadoop有关的lib里的jar包全部放入进去
3、Build Path 出现这东西,右边点击Add Library… 把刚才创建的lib导入生效
注
如果你上传,重命名什么都不报错但是web页面不显示没有效果,那就是你配置没有生效, 右击项目 Build Path 一下,让你新创的文件夹变成源文件,这样才能找到你的xml配置
以下代码块,高能预警!!!
// 引入配置文件
Configuration conf=null;
// 创建文件流 --- 引用的是hadoop内部封装的方法
FileSystem fs = null;
@Before
public void conn() throws Exception{
// 设置是否读取配置信息
conf=new Configuration(true);
fs=FileSystem.get(conf);
}