1、将hadoop-2.7.3.tar.gz解压(Windows),解压路径不要出现中文、空格
2.将windows软件/插件.rar/bin/ 中的所有文件(7个) 拷贝到 hadoop-2.7.3 解压的bin目录中
Hadoop Windows插件配置:
1、将hadoop-2.7.3.tar.gz解压(Windows),解压路径不要出现中文、空格
2、将01课前资料/windows软件/插件.rar/bin/ 中的所有文件(7个) 拷贝到 hadoop-2.7.3 解压的bin目录中
3、将hadoop-2.7.3/bin/hadoop.dll文件复制到C:/Windows/System32/ 目录下
4、双击hadoop-2.7.3/bin/winutils.exe文件
5、配置环境变量
%HADOOP_HOME%\bin
%HADOOP_HOME%\sbin
Hadoop Eclipse插件配置:
1、解压Eclipse
2、将01课前资料/windows软件/插件.rar/hadoop-eclipse-plugin-2.6.5.jar 文件拷贝到 Eclipse的plugins目录下
3、启动Eclipse
4、Eclipse:window–>Preferences–>Hadoop Map/Reduce 在右侧的界面中指定Hadoop-2.7.3解压根目录
5、Eclipse:window–>Preferences–>General–>WorkSpace 在右侧的界面中设置字符集text file encoding为UTF-8
6、在Eclipse:window–>Show view–>Other 输入map,双击显示的Map/Reduce Locations
7、Map/Reduce Locations:空白处右键–>new Hadoop Locations
Location name: 名称任意指定
Map/Reduce(V2)Master:
Host:虚拟机IP地址(192.168.56.100)
DFS Master:
Port:9000
保存退出。
此时在项目管理栏中,可以看到DFS Locations,点击打开,就可以看到在HDFS文件系统中的内容。
使用XShell和XFTP连接Linux操作系统的时候,等待时间较长:
vi /etc/ssh/sshd_config
进入之后,先按 /DNS (搜索包含DNS的字符串)
找到如下所示的字符串:
#UserDNS yes
修改为 UserDNS no
保存退出。
重启ssh服务
service sshd.service restart