hadoop集群搭建

本文详细介绍了如何搭建Hadoop集群,包括复制虚拟机、配置文件修改、删除logs和tmp目录、集群格式化和启动,最后通过jps验证安装成功。
摘要由CSDN通过智能技术生成

1.复制新的两台虚拟机

(三台机器都要确定都修改成功,互信要连接试试)
(1)修改IP:vi /etc/sysconfig/network-scripts/ifcfg-ens33

(2)重启网络:systemctl restart network

(3)设置主机名:homenamectl set-hostname hadoop002

(4)添加hosts:

vi /etc/hosts
可以往远程拷贝此文件:scp /etc/hosts root@hadoop002

在这里插入图片描述
(5)添加互信(以下三步都要进行操作)

#生成秘钥:
ssh-keygen -t rsa
cat /root/.ssh/id_rsa.pub >> /root/.ssh/authorized_keys
开启远程登录:
[root@hadoop001 ~]#ssh-copy-id -i .ssh/id_rsa.pub -p22 root@192.168.56.122

三台互相登录一下,查看是否连接成功!!!

2.在主机hadoop001上修改一下配置文件

(在/opt/hadoop目录下输入以下命令)

(1)vi etc/hadoop/hdfs-site.xml

将副本数改成3

将secondary的ip改成第二台机器的ip

<configuration>
 <property>
        <name>dfs.replication
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值