HDFS

HDFS的搭建以及程序调试
1.安装配置Maven
步骤：安装JDK→安装Eclipse→安装Maven→ Eclipse里配置Maven （下载Windows版本，在Windows里安装使用。）
1.安装配置JDK
①官网下载Java开发工具安装包jdk-8u201-windows-x64.exe：https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html
②运行安装包，第一次选择JDK安装路径，第二次选择JRE安装路径，开始安装。
③配置JDK的环境变量，Path添加JDK的\bin的安装路径，cmd命令行运行javac，查看是否成功安装配置。

2.安装Eclipse
①官网下载Eclipse安装包eclipse-inst-win64：https://www.eclipse.org/downloads/
②运行安装包，选择Eclipse IDE for Java Developers，开始安装。过程可能较慢。

3.安装Maven
① Maven官网http://maven.apache.org/download.cgi，选择最近的镜像，选择Maven压缩包apache-maven-3.6.0-bin.tar.gz开始下载。
②解压Maven压缩包apache-maven-3.6.0-bin.tar.gz，解压后的文件夹\apache-maven-3.6.0，将其考入自定义路径，如C:\eclipse\apache-maven-3.6.0。
③配置Maven的环境变量，Path添加Maven的\bin的安装路径，cmd命令行运行mvn -v，查看是否成功安装配置。

4.Eclipse配置Maven
①修改settings.xml
在安装所在文件夹\apache-maven-3.6.0下面，新建\repository文件夹，作为Maven本地仓库。在文件settings.xml里添加 C:\eclipse\apache-maven-3.6.0\repository。
②配置Maven的installation和User Settings
【Preferences】→【Maven】→【Installations】配置Maven安装路径，【User Settings】配置settings.xml的路径。
③添加pom.xml依赖
依赖（Maven Repository: hadoop）所在网址：https://mvnrepository.com/tags/hadoop ，找到对应版本的三个依赖，拷贝至pom.xml的与之间，保存之后自动生成Maven Dependencies。
安装成功如下所示

2.新建Maven Project


然后新建四个java文件编程





运行成功


其他两个文件我也运行成功了，但是忘了截图

小结：总的没有遇到什么大问题，如果文件已存在是会报错的，就只能先把存在的文件删除再重新运行程序，在运行调试时可能会出现无法找到主机，类似异常信息如下
java.net.UnknownHostException: unknown host: bigdata129解决办法如下：在C:\WINDOWS\system32\drivers\etc\hosts文件中添加如下信息：192.168.78.129 bigdata
出现log4j参考https://blog.csdn.net/m0_37874657/article/details/80536086网站做法，最终解决