Windows配置hadoop环境变量并使用java连接

最新推荐文章于 2024-07-24 17:38:13 发布

少年惨绿

最新推荐文章于 2024-07-24 17:38:13 发布

阅读量748

点赞数 1

分类专栏：大数据文章标签： java hadoop

本文链接：https://blog.csdn.net/dengzhigang1998/article/details/107041823

版权

本文详细介绍了在Windows系统中配置Hadoop环境变量的步骤，包括添加环境变量、导入hadoopbin文件、处理hadoop.dll，以及使用maven创建项目。接着，文章演示了如何创建HDFS文件夹、删除文件、上传本地文件到HDFS以及从HDFS下载到本地的操作，是Java开发者连接Hadoop的实用教程。

摘要由CSDN通过智能技术生成

准备工作

已在虚拟机上配置了hadoop
hadoop2.6.0软件包
hadoopbin工具
链接: https://pan.baidu.com/s/1PwwIkN34jzHuYSm3gq7vnA
提取码: yxmi

配置环境变量

右键我的电脑，点击属性，打开高级系统设置，点击环境变量
点击新建：

HADOOP_HOME=你windows本地的hadoop文件夹路径

找到Path，点击编辑
添加：

%HADOOP_HOME%\bin
%HADOOP_HOME%\sbin

导入hadoopbin文件

解压hadoopbin文件，导入到你本地hadoop文件目录的bin目录下，替换文件
将hadoop.dll在C:\Windows\System32里面再放一份

maven创建项目

在xml文件里配置如下代码，等待下载完成

<dependency>
      <groupId>org.apache.hadoop</groupId>
      <artifactId>hadoop-common</artifactId>
      <version>2.6.0</version>
    </dependency>
    <!-- https://mvnrepository.com/artifact/org.apache.hadoop/hadoop-client --&g