linux 使用hadoop中常用的一些命令
hadoop 常见问题&解决方法
前言
新手上路面对陌生的Hadoop,在配置过程中会出现各种各样的问题,或者终于成功搭建却用了几次就被玩坏,查找各种修补方法都以失败告终,只好卸载重装。
这时候最期待的就是一份好的文字教程,一份好的文字教程比看视频,听讲解有用得多。
在经历了许多问题与重装之后,终于,这篇记录出现了,目的就是希望能在安装过程中尽量避免无意义的问题,顺利地完成Hadoop集群的搭建,并且在这个过程中尽可能地多学一点东西。
文中也涉及了一些在CentOS 6.6版本的配置过程中不同7的地方
首先介绍两个工具,都是为了让我们操作虚拟机更加便捷,当然不使用也没关系
使用secureCRT
secureCRT是一款支持SSH(SSH1和SSH2)的终端仿真程序,简单来说使用它可以代替我们直接在虚拟机的终端界面进行命令操作,可以快速在各个虚拟机终端之间切换,同时开启多个会话等等,让我们在终端的操作变得十分方便
使用Xftp
可以使用Xftp将文件发送到虚拟机,可以进行创建目录,删除文件等操作,十分便捷
创建链接时,协议选择SFTP
创建虚拟机
注意网络连接选择为桥接模式
创建过程中选择NETWORK$HOSTNAME
,不仅可以查看自己的IP地址等信息,还可以在这里直接修改hostname,当然错过了也没关系,我们还有其他方法修改
设置IP地址
查看自己的IP地址,需要先开启网络
# ifconfig
在/etc/resolv.conf中查看DNS
域名解析,很重要,否则连百度都访问不到,上网只能用IP地址上了
CentOS 7
# vi /etc/sysconfig/network-scripts/ifcfg-ens33
CentOS 6.6
# vi /etc/sysconfig/network-scripts/ifcfg-eth0
修改
BOOTPROTO=static
ONBOOT=yes
添加(根据之前查看的虚拟机的IP地址进行配置)
IPADDR=172.17.11.120
NETMASK=255.255.255.0
GATEWAY=192.168.117.2
DNS1=192.168.117.2
设置完成后,重启网络
# service network restart
编辑Host文件
关闭Selinux
vi /etc/sysconfig/selinux
查看hostname
# hostname
修改hostname
CentOS 7
方法1:在安装系统时指定主机名(选择NETWORK$HOSTNAME)
方法2:使用hostnamectl命令
# hostnamectl set-hostname name
方法3:编辑/etc/hostname配置文件,在这里会看到默认主机名,修改为自定义的主机名保存
使用hostnamectl status或hostn