三分钟教会你如何用hadoop搭建集群、配置时区同步(1),快来点赞吧

本文将指导你如何用hadoop搭建集群,包括文件配置、集群间文件传输,重点讲解了配置集群时区同步的重要性及步骤,确保大数据处理中时间一致性。通过下载ntp安装包,修改节点配置,启动并检查ntp服务,最终实现时区同步。
摘要由CSDN通过智能技术生成

一、前言

前面的两篇博客已经教会了小伙伴们如何安装hadoop,以及克隆虚拟机,最后添加互信来实现免密登录,如果有遗忘的小伙伴们,请查看我之前的博客哦

二、修改文件配置

回到Hadoop文件修改文件配置内容 /hadoop
修改内容如下:
1.

vi hdfs-site.xml
	  <value>3<value>   //将之前的1改为3
vi slaves  //添加互信的主机名

三、传输文件

把配置好的文件传输到克隆的主机上

scp ./*xml root@hadoop002:$PWD	
SCP ./slaves root@hadoop002:$PWD
scp ./*xml root@hadoop003:$PWD
SCP ./slaves root@hadoop003:$PWD

1.回到hadoop安装包下
2.删除tmp/logs
3.格式化hdfs
4.开始HDFS
5.jps查看

四、配置集群时区同步

这里为什么要配置时区同步呢?因为大数据是个对数据信息都很敏感的,我们用到的时间必须保持一致
首先需要下载ntp安装包

yum install ntp -y   //下载ntp包(克隆机一起下载)
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值