Eclipse配置Hadoop开发环境
1. Windows 环境配置
jdk的安装与配置
略
1.1 下载hadoop
http://archive.apache.org/dist/hadoop/core/
选择版本下载,并解压(解压到没有中文的目录)
1.2 配置环境变量
- HADOOP_HOME
hadoop解压目录路径 - HADOOP_USER_NAME
linux中在哪个用户下安装的hadoop集群,就写哪个用户
例如:linux用户为grip,该值就为grip;如果是root,该值就为root - Path
将$HADOOP_HOME目录下的bin和sbin目录添加到Path中
1.3 查看命令
以管理员身份运行cmd,输入hdfs
2. Eclipse配置
2.1 安装插件
- 下载hadoop的Eclipse插件,解压
根据hadoop版本在网上找 - 将插件jar包拷贝到eclipse/plugins目录下
(如果无法继续Eclipse配置,则拷贝到eclipse/dropins目录下)
2.2 Eclipse配置
打开eclipse会看到
Window —> Preferences
Apply and Close
Window —> Show View —> Map/Reduce Locations —> open
一开始是空白的,可以点击右上方的蓝色小象按钮,也可以右键(New Hadoop location)
有多个namenode可以配置多个location
配置完成后回到项目面板,连接hadoop集群