如题,这是一个很简单的基于HDFS的小项目,主要功能就四个,分别是:文件的上传、展示上传目录中的文件列表、文件的下载、文件的删除。没错,又是很没有意思的增删查改,不过对于接触Hadoop之后的第一个项目来说,这样的小项目难度比较适中,上手也比较容易,也算是不二选择了。
如果你是根据我上一篇文章来安装的Hadoop的话,请打开你的Windows的网络适配器,确保VMnet8网络连接的IPv4协议使用的IP的网段和你在虚拟机NAT设置中的网段一致,否则无法连接HDFS文件系统,如下图:
正式开始
这个项目使用了MAVEN,所需要的包如下:
<dependencies>
<dependency>
<groupId>junit</groupId>
<artifactId>junit</artifactId>
<version>4.11</version>
<scope>test</scope>
</dependency>
<dependency>
<groupId>commons-fileupload</groupId>
<artifactId>commons-fileupload</artifactId>
<version>1.4</version>
</dependency>
<dependency>
<groupId>commons-io</groupId>
<artifactId>commons-io</artifactId>
<version>2.6</version>
</dependency>
<dependency>
<groupId>org.apache.logging.log4j</groupId>
<artifactId>log4j-core</artifactId>
<version>2.8.2</version>
</dependency>
<dependency>
<groupId>org.apache.hadoop</groupId>
<artifactId>hadoop-common</artifactId>
<version>2.7.5</version>
</dependency>
<dependency>
<groupId>org.apache.hadoop</groupId>
<artifactId>hadoop-client</artifactId>
<version>2.7.5</version>
</dependency>
<dependency>
<groupId>org.apache.hadoop.</groupId>
<artifactId>hadoop-hdfs</artifactId>
<version>2.7.5</version>
</dependency>
<dependency>
<groupId>javax.servlet</groupId>
<artifactId>javax.servlet-api</artifactId>
<version>3.0.1</version>
</dependency>
<dependency>
<groupId>javax.servlet.jsp</groupId>
<artifactId>jsp-api</artifactId>
<version>2.1</version>
</dependency>