第一节:配置hadoop基本开发环境 VirtualBox+CentOS+Yum
Windows设置:
1.到oracle官网下载并安装oracle virtualbox虚拟机(下载最新版本)
下载地址:https://www.virtualbox.org/wiki/Downloads
2.下载安装CentOS-6.6-i386-minimal.iso
下载地址:http://mirrors.163.com/centos/6.6/isos/i386/
3.下载安装jdk-7u80-windows-x64.exe
下载地址:http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downloads-1880260.html
4.在物理机C:\Windows\System32\drives\etc\hosts文件中添加虚拟机ip地址和虚拟机主机名的映射,格式如下所示:
192.168.152.133 hadoop1
5.下载SecureCRT工具,用于连接和操作虚拟机。
6.下载winSCP工具,用于往虚拟机上传和下载文件。
7.虚拟机网络选择->桥接方式
虚拟机设置:
1.设置->”常规”中修改主机名为hadoop1,类型选Linux,版本选择Red Hat (32bit)。
设置->”网络“选择 桥接网卡
2.设置虚拟机ip。
因虚拟机网络为桥接网卡模式,虚拟机的ip应与物理机在同一网段。先在物理机的commondline中使用ipconfig查看本机的ip地址和网关。然后,为虚拟机配置临时IP地址:ifconfig eth0 ip地址(与物理机ip地址在同一网段)。最后,在物理机中ping虚拟机主机名,在虚拟机中ping物理机网关,两者都能ping通,说明ip地址分配正确。为虚拟机设置ip地址方法如下所示:
修改 /etc/sysconfig/network-script/ifcfg-eth0 文件
DEVICE = eth0
TYPE = Ethernet
ONBOOT = yes
NM_CONTROLLED = yes
BOOTPROTO = static
IPADDR = 192.168.152.133
NETMASK = 255.255.255.0
GATEWAY = 192.168.152.33
service network restart
*注:若配置完ip地址后有问题,可按如下步骤排错:
ping 127.0.0.1 ———— ping通说明tcp协议栈没有问题
ping 物理机ip ———— ping通说明网卡没有问题
ping 默认网关 ———— ping通说明路由没有问题
ping DNS服务器 ———— ping通说明域名解析没有问题
3.配置dns(用于连接外网时解析域名)
vi /etc/resolv.conf
添加nameserver 202.96.134.133(深圳)
4.关闭iptables(关闭防火墙)
service iptables stop(虚拟机重启后会失效)
chkconfig iptables off(设置虚拟机启动时关闭iptables)
5.关闭selinux
vi /etc/selinux/config
设SELINUX=disabled
6.一般情况下,到这一步后虚拟机就可以连接外网了(可以通过测试ping www.baidu.com来检查),但因我所处的环境需要登录上网客户端,所以,我需要再下载一个Linux版本的上网客户端,安装后,登录账号和密码,才能连接外网。
7.配置163 Yum源(Yum是Linux的软件管理工具,此步操作需要保证虚拟机可以连接外网)
到http://mirrors.163.com/.help/centos.html下载对应版本的repo文件,放入/etc/yum.repos.d/(操作前做好备份)
运行一下命令生成缓存:
yum clean all
yum makecache
8.安装jdk-7u80-linux-i586.rpm
下载地址:http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downloads-1880260.html
安装jdk:>rpm -ivh jdk-7u80-linux-i586.rpm
jdk默认安装在/usr/java文件夹下,去.bashrc文件中设置JAVA_HOME和PATH环境变量
vi /root/.bashrc
export JAVA_HOME = /usr/java/latest
export PATH = PATH: JAVA_HOME/bin
source .bashrc
9.删除70-persistent-net.rules文件(保证再复制一个虚拟机时,网络不会出问题)
cd /etc/udev/rules.d
rm -f 70-persistent-net.rules