实验二:HDFS命令和Java API

步骤:1.安装JDK→2.安装Eclipse→3.安装Maven→4. Eclipse里配置Maven (下载Windows版本,在Windows里安装使用。)

1、安装配置JDK

①官网下载Java开发工具安装包jdk-8u201-windows-x64.exe:https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html
②运行安装包,第一次选择JDK安装路径,第二次选择JRE安装路径,开始安装。
③配置JDK的环境变量,Path添加JDK的\bin的安装路径,cmd命令行运行javac,查看是否成功安装配置。

2、安装Eclipse

①官网下载Eclipse安装包eclipse-inst-win64:https://www.eclipse.org/downloads/
②运行安装包,选择Eclipse IDE for Java Developers,开始安装。过程可能较慢。

3、安装Maven

① Maven官网http://maven.apache.org/download.cgi,选择最近的镜像,选择Maven压缩包apache-maven-3.6.0-bin.tar.gz开始下载。
②解压Maven压缩包apache-maven-3.6.0-bin.tar.gz,解压后的文件夹\apache-maven-3.6.0,将其考入自定义路径,如C:\eclipse\apache-maven-3.6.0。
③配置Maven的环境变量,Path添加Maven的\bin的安装路径,cmd命令行运行mvn -v,查看是否成功安装配置。

4、Eclipse配置Maven

在安装所在文件夹\apache-maven-3.6.0下面,新建\repository文件夹,作为Maven本地仓库。在这里插入图片描述
①修改settings.xml
找到maven的安装路径,在这里插入图片描述
打开文件settings.xml在里面添加 (新建repository的路径)保存退出

<localRepository>D:\apache\apache-maven-3.6.0\repository</localRepository>

如下图位置:在这里插入图片描述
②配置Maven的installation和User Settings
【Preferences首选项】→【Maven】→【Installations】配置Maven安装路径在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
【User Settings】配置settings.xml的路径。
打开Window(窗口)->Preferences(首选项)->Maven->User Settings->Browse
在这里插入图片描述
在这里插入图片描述

在Eclipse里新建Maven Project

在这里插入图片描述
输入com.bla,项目名称HDFSTest在这里插入图片描述
等待自动生成Maven项目(可能要多等一下)
新建包hdfs.files,包里新建class:4个java文件(名字如下)。
在这里插入图片描述
添加pom.xml依赖:
找到最下面的pom.xml,右键打开,然后复制下面的代码到pom.xml的与之间即可

<dependencies>
  <dependency>
      <groupId>org.apache.hadoop</groupId>
      <artifactId>hadoop-hdfs</artifactId>
      <version>2.7.3</version>
  </dependency>
  <dependency>  
      <groupId>org.apache.hadoop</groupId>  
      <artifactId>hadoop-client</artifactId>  
      <version>2.7.3</version>  
  </dependency> 
  <dependency>
      <groupId>org.apache.hadoop</groupId>
      <artifactId>hadoop-common</artifactId>
      <version>2.7.3</version>
  </dependency>
</dependencies>

在这里插入图片描述
在这里插入图片描述
(按ctrl+s保存,会弹出窗口下载依赖,速度会很慢,多等就好)保存之后自动生成Maven Dependencies。
在这里插入图片描述
安装配置成功后,Maven项目树显示如下两项:
在这里插入图片描述

1.HDFSMKdir.java新建HDFS目录/aadir。

在这里插入图片描述

2.HDFSUpload.java写入/上传 本地文c:\hdfs\aa.txt 到HDFS的/aadir目录下。在这里插入图片描述

3.HDFSDownload.java读/下载 HDFS的根目录文件/bb.txt 到本地c:\hdfs目录下。

在这里插入图片描述

4.HDFSFileIfExist.java查看HDFS文件/bb.txt是否存在。在这里插入图片描述

5.运行4个java文件,web运行192.168.134.134:50070,页面正常则成功

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值