使用IntelliJ IDEA 16.1写hadoop程序

本文介绍了如何在mac环境下,使用IntelliJ IDEA 16.1创建并配置Hadoop工程,详细讲述了从下载IDE到配置Hadoop环境、编写WordCount代码、上传文件到HDFS以及运行程序的全过程。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

背景

       前段时间配置好了基于mac的hadoop完全分布式环境,一直想着怎么样去用编译器写程序然后直接在hadoop环境中运行呢,经过一番摸索,写下此文章分享交流。

环境介绍

  • os x EI Capitan 10.11.5
  • 虚拟机:Parallels Desktop
  • ubuntukylin 14.04 64bit * 2
  • hadoop 2.6.2
  • os x上的jdk版本:1.8.0_73,ubuntu上的jdk版本:1.8.0_91(不同机器上的jdk版本不要求一样)
  • IntelliJ IDEA 16.1
如果没有配置好hadoop的环境,请参考本人另一篇博文:http://blog.csdn.net/wk51920/article/details/51686038

下载及安装IntelliJ IDEA 16.1

       1. 登录官网:https://www.jetbrains.com/idea/下载最新版本的编译器。
       2. 安装编译器。

创建hadoop工程

       1. 打开IntelliJ IDEA编译器,创建一个新的工程,点击next
这里写图片描述
       2. 输入工程的名字,点击Finish
这里写图片描述
       3. 创建如下图的包结构及WordCount.java文件:
这里写图片描述
       4. 添加JDK,如果已经配置了JDK可以省略此步骤:在侧边栏右击这里写图片描述选择“Open Module Settings”
这里写图片描述
 

评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值