利用 hadoop 的 FileSystem copyFromLocalFile 方法实现文件上传HDFS中 Hadoop 版本 2.7.0

利用 hadoop 的 FileSystem copyFromLocalFile 方法实现文件上传HDFS中 

Hadoop 版本 2.7.0

另外说明：

远程调用机器 需要 liunx 修改 /etc/hosts 添加 10.11.12.4 master

package com.feng.test.hdfs.filesystem;


import java.net.URI;


import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;


/**
 * 上传文件 远程调用机器 需要 liunx 修改 /etc/hosts 添加 10.11.12.4 master
 * 
 * @author feng
 *
 */


public class CopyFromLocalFile {


public static void main(String[] args) {
FileSystem hdfs = null;
try {
String destfile = "/feng/tmp/" + System.currentTimeMillis();
String fsrc = "/Users/feng/Downloads/83.txt";


Configuration config = new Configuration();
// 程序配置
config.set("fs.default.name", "hdfs://master:9000");


hdfs = FileSystem
.get(new URI("hdfs://master:9000"), config, "feng");
Path srcPath = new Path(fsrc);
Path destPath = new Path(destfile);


// hdfs.copyFromLocalFile(srcPath, destPath);
// delSrc whether to delete the src
boolean delSrc = true;
hdfs.copyFromLocalFile(delSrc, srcPath, destPath);
System.out.println("It is over : " + destfile);
} catch (Exception e) {
e.printStackTrace();
} finally {
if (hdfs != null) {
try {
hdfs.closeAll();
} catch (Exception e) {
e.printStackTrace();
}
}
}
}


}