hdfs客户端操作

这里hdfs客户端指的是eclipse

一、获取hadoop安装包解压后进入share文件夹里面的所有jar包

二、这里如果你客户端（eclipse所在机器）是win7，需要编译hadoop源码来适应你的机器。

三、配置HADOOP_HOME环境变量和PATH

四、拷贝win7电脑上的文件到虚拟机hadoop集群上：

public class HdfsClientDemo1 {
	public static void main(String[] args) throws Exception {
		// 1 获取文件系统
		Configuration configuration = new Configuration();
		// 配置在集群上运行
		configuration.set("fs.defaultFS", "hdfs://hadoop102:9000");
		FileSystem fileSystem = FileSystem.get(configuration);
		
		// 直接配置访问集群的路径和访问集群的用户名称
//		FileSystem fileSystem = FileSystem.get(new URI("hdfs://hadoop102:9000"),configuration, "root");
		
		// 2 把本地文件上传到文件系统中
		fileSystem.copyFromLocalFile(new Path("f:/hello.txt"), new Path("/hello1.copy.txt"));
		
		// 3 关闭资源
		fileSystem.close();
		System.out.println("over");
	}
}

运行的时候，需要指定用户名称。客户端去操作hdfs时，是有一个用户身份的。默认情况下，hdfs客户端api会从jvm中获取一个参数来作为自己的用户身份：-DHADOOP_USER_NAME=root，root为用户名称。