通过widows客户端访问Hadoop集群,读取HDFS文件
使用平台为eclipse,CDH5.1.0,hdf2.3.0
1、新建java project
2、在集群中找到core-site.xml和hdfs-site文件拷贝到java project的工程下,放置到bin文件夹下
在src右键,新建source folder即可,如下
2、编程代码如下:
package com.mail;
import java.net.URI;
import java.io.InputStream;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IOUtils;
public class Hdfs {
public static void main(String[] args) {
// TODO Auto-generated method stub
try {
Configuration conf = new Confi