Hadoop+Hive学习笔记-1

VMware和虚拟机安装

VMware安装&网络调试

step1：安装VMware
根据安装向导安装即可

step2：网卡设置
VMware安装成功后，电脑上会出现两个虚拟网卡：
VMware Network Adapter VMnet1、VMware Network Adapter VMnet8
两者的区别：
VMware Network Adapter VMnet1：这是Host用于与Host-Only虚拟网络进行通信的虚拟网卡；
VMware Network Adapter VMnet8：这是Host用于与NAT虚拟网络进行通信的虚拟网卡；

延伸了解Host-Only和NAT虚拟网络的区别：

Host-Only：在某些特殊的网络调试环境中，要求将真实环境和虚拟环境隔离开，这时你就可采用Host-only模式在Host-only模式中，所有的虚拟系统是可以 相互通信的，但虚拟系统和真实的网络是被隔离开的可以利用Windows XP里面自带的Internet连接共享(实际上是一个简单的路由NAT)来让虚拟机 通过主机真实的网卡进行外网的访问虚拟系统的TCP/IP配置信息(如IP地址网关地址DNS服务器等)，都是由VMnet1(Host-only)虚拟 网络的DHCP服务器来动态分配的。

NAT：使用NAT模式，就是让虚拟系统借助NAT(网络地址转换)功能，通过宿主机器所在的网络来访问公网也就是说，使用NAT模式可以实现在虚拟系统里访问互 联网NAT模式下的虚拟系统的TCP/IP配置信息是由VMnet8(NAT)虚拟网络的DHCP服务器提供的，无法进行手工修改，因此虚拟系统也就无法 和本局域网中的其他真实主机进行通讯采用NAT模式最大的优势是虚拟系统接入互联网非常简单，你不需要进行任何其他的配置，只需要宿主机器能访问互联网即可

如果你想利用VMware创建一个与网内其他机器相隔离的虚拟系统，进行某些特殊的网络调试工作，可以选择Host-only模式。
如果你想利用VMware安装一个新的虚拟系统，在虚拟系统中不用进行任何手工配置就能直接访问互联网，建议你采用NAT模式

这里应该选择用NAT模式，所以可以禁用掉VMware Network Adapter VMnet1网卡

step3：设置静态IP
不设置的话，由于IP是动态获取的；
由于需要给/etc/hosts文件配置3台虚拟机的IP，如果不设置静态IP，即使之前整个集群搭建成功了，但是当某一台的IP变化后，这个集群就不可以使用了。
为了后续方便使用，对VMware Network Adapter VMnet8网卡设置静态IP

step4：设置VMware虚拟网络编辑器
通过编辑→虚拟网络编辑器进入编辑器设置
点击右下角更改设置进入设置，选择我们要用VMnet8，将下面的子网地址修改为刚刚设置的静态IP一致：192.168.5.0

这里可以点击NAT设置，进去检查一下网关是否已经变成了192.168.5.2，和刚刚网卡里的设置一致

虚拟机安装

在VMware里新建虚拟机，按照安装向导一步步安装
硬件兼容性选择：workstation 12.X
操作系统选择：Linux 版本CentOS 64位
虚拟机命名、内存和处理器配置按照推荐即可，网络配置记得选择NAT模式
虚拟机安装完成之后，编辑虚拟机设置，在DVD选项内，选择准备好的CentOS映像文件
启动虚拟机，进入安装流程
选择install CentOS7
设定好系统时间和语言等
software selection选择Basic Web Server（静态网络连接，与我前面准备的相符）
在installation destination中选择‘I will configure partitioning’，进入分配磁盘空间，设置根目录、root和swap
在Network & Host Name中打开Ethernet开关，设置Host Name为之前命名虚拟机名称方便访问
全部设置OK之后，Begin Installation开始安装
安装时可以设置ROOT password 并在user creation创建一个用户，记好账号密码
全部OK之后，一台虚拟机即安装成功

由于Hadoop集群需要安装 奇数台 虚拟机，这里选择安装三台，同样的步骤操作即可

安装成功之后，可以用 ifconfig 指令查看目前虚拟机的IP地址

Xshell安装&连接

按照安装向导安装XShell
点击新建，进入连接设置窗口
输入连接名称（自定义即可）
主机栏输入虚拟机对应的IP地址（可以用ifconfig查看）
在用户身份验证，输入安装虚拟机时新创建的用户名和密码
在外观可以自定义字体颜色及外观
点击确定后即生成一个新的连接
打开连接，提示connection established，即连接成功
此时会出现和虚拟机内类似的输入提示，即可通过Xshell对虚拟机进行操作