之前,一直通过Linux命令操作HDFS。接下来,在本地配置HDFS客户端,通过编写代码操作HDFS。
环境:
- mbp2018
- hadoop-2.7.7
配置步骤
1. 在本地解压hadoop-2.7.7.tar.gz,并配置环境变量。在终端输入$ hadoop
测试是否安装成功。
2. 在IDEA中建立一个空的mavean工程。
File new
Projects
![7239122-773f5a6b3197b752.png](https://i-blog.csdnimg.cn/blog_migrate/526b57649b559fde7a4af6155e9f9bb7.png)
一路确定即可
3. 打开工程中的pox.xml文件,在pom.xml文件中加入如下内容:
<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
<modelVersion>4.0.0</modelVersion>
<groupId>com.bigdata</groupId>
<artifactId>hadoop100</artifactId>
<version>1.0-SNAPSHOT</version>
<dependencies>
<dependency>
<groupId>junit</groupId>
<artifactId>junit</artifactId>
<version>RELEASE</version>
</dependency>
<dependency>
<groupId>org.apache.