Hadoop安装(二)---伪分布式模式
伪分布式模式(Pseudo-Distributed Mode)是完全分布式的一种特例,指Hadoop运行在一台主机上,使用多个Java进程,模仿完全分布式的各类节点,常用于调试程序。
下表为安装伪分布式模式所需要修改的文件、属性名称、属性值及含义。
1、安装前准备
参考
2、修改主机名
查看Ubuntu操作系统的主机名,
$ hostname
为了安装方便和易于记忆,将这台主机的主机名修改为node1,
$ sudo vi /etc/hostname
将原有内容替换为如下内容,
node1
重启Ubuntu操作系统,使修改生效。
$ sudo reboot
3、映射IP地址及主机名
修改/etc/hosts文件,
$ sudo vi /etc/hosts
在文件末尾添加以下内容,IP地址根据实际修改。
192.168.64.129 node1
4、免密登录设置
如果只需要本机登录别的主机,把本机当作客户端,则在本机安装SSH客户端(openssh-client)软件即可。如果要让别的主机(包括本机自己)登录本机,也就是说把本机当作服务端,就需要安装SSH服务端(openssh-server)软件。Ubuntu操作系统默认没有安装SSH服务端软件,请参考安装前准备的安装SSH进行安装。
登录其他主机时,通常需要输入密码。如果要让普通用户(如hadoop)无需输入密码就可以登录集群内的主机,即实现免密登录,通常的做法是在本机创建一个密钥对(包括公钥和私钥),并将公钥发送给集群内所有的主机进行认证,即可实现免密登录。
伪分布式模式只有一个节点,本机同时扮演着客户端和服务端的角色。在SSH客户端软件和SSH服务端软件都安装好的前提下,进行以下免密登录设置。
(1)生成密钥对
rsa表示加密算法,输入以下命令后连续回车,系统会自动在~/.ssh目录下生成公钥(id_rsa.pub)和私钥(id_rsa),不同的节点生成的图案不同很正常。
$ ssh-keygen -t rsa
通过命令查看。
$ ls ~/.ssh
(2)追加公钥
以本机登录本机自己为例(连接本机),将公钥追加到~/.ssh/authorized_keys文件中,
$ ssh-copy-id -i ~/.ssh/id_rsa.pub node1
查看认证文件authorized_keys是否已经生成,
$ ls ~/.ss