Window下Intellij Idea本地hadoop运行环境

本文档详细介绍了在Windows上使用Intellij Idea配置和运行Hadoop的步骤,包括下载hadoop-2.6.0安装包,设置环境变量,下载配置文件,并在IDE中运行测试代码。同时,针对遇到的ExitCodeException和winutils找不到的错误进行了分析,提供了解决方案。
摘要由CSDN通过智能技术生成

资源准备

下载代码资源包
  • 下在hadoop-2.6.0安装包,可以去官网下载
  • 下载winutils等文件
  • bin目录下载地址
  • 等级太低上传不了完整版,就只上传了bin 目录,下载好 hadoop-2.6.0之后将下载的bin目录替换。
配置环境变量

在windows下配置hadoop-2.6.0的环境变量。
HADOOP_HOME=D:/hadoop-2.6.0
path = %HADOOP_HOME%\bin

下载配置文件

需要将集群上的core-site.xml,hbase-site.xml,hdfs-site.xml配置文件下载到本地并拷贝到 Intellij Idea工程的resources的目录中。

在Intellij Idea上运行

在Intellij Idea上新建工程,然后用以下代码进行测验

class hdfsTest {
public static void main(String args[]) throws IOException {
    download();
}
// 下载文件
public static void download() throws IOException
{
    //以下两行用来指明登陆hadoop的用户和你本
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值