12. Hadoop集群搭建 - 分发并修改文件 - 基于CentOS7 -【连载中】

续上一篇文章:11. Hadoop集群搭建 - Hadoop配置文件修改 - 基于CentOS7 -【连载中】

上一篇文章已经将Hadoop配置文件修改(添加)完毕,未完成的同学请移步上一篇文章

之前已经配置过免密,如未配置免密的同学请移步至配置免密文章
(最上方专栏中可查看)

分发Profile文件

查看Profile文件路径

Profile文件为我们配置的环境变量文件
其路径为:/etc/profile
绝对路径如下:

[root@master etc]# whereis profile
profile: /etc/profile 

分发Profile配置文件:

将文件分发给Salve1命令如下:

scp /etc/profile slave1:/etc/

实例如下:

[root@master ~]# scp /etc/profile slave1:/etc/
profile                                                                                     100% 2016     1.1MB/s   00:00    

将文件分发给Salve2命令如下:

scp /etc/profile slave2:/etc/

实例如下:

[root@master ~]# scp /etc/profile slave2:/etc/
profile                                                                                     100% 2016    47.6KB/s   00:00     

分发HadoopJDK应用文件:

说明:因为tar.gz压缩包不需要发送,我们只需要发送两个已经配置好的软件即可,那么两个软件又在/usr/apps路径下,故我们只发送apps文件夹即可,但发送文件夹需要一个命令符:-r

命令如下:

scp -r /usr/apps/ slave1:/usr/

实际操作如下:

[root@master ~]# scp -r /usr/apps/ slave1:/usr/

回车发送,静静等待发送完毕

刚刚发送给了Slave1现在我们发送到Slave2
同样的命令,改个名称即可:

[root@master ~]# scp -r /usr/apps/ slave2:/usr/

分发完毕

下一篇文章:

  • 2
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
yarn-site.xml是Hadoop YARN的配置文件之一,主要用于配置YARN资源管理器(ResourceManager)和节点管理器(NodeManager)的相关参数。下面是一个示例yarn-site.xml文件,你可以根据自己的需求进行相应的修改。 ```xml <?xml version="1.0"?> <configuration> <!--YARN ResourceManager配置--> <property> <name>yarn.resourcemanager.hostname</name> <value>your_rm_host_name</value> </property> <property> <name>yarn.resourcemanager.address</name> <value>${yarn.resourcemanager.hostname}:8032</value> </property> <property> <name>yarn.resourcemanager.scheduler.address</name> <value>${yarn.resourcemanager.hostname}:8030</value> </property> <property> <name>yarn.resourcemanager.resource-tracker.address</name> <value>${yarn.resourcemanager.hostname}:8031</value> </property> <property> <name>yarn.resourcemanager.admin.address</name> <value>${yarn.resourcemanager.hostname}:8033</value> </property> <property> <name>yarn.resourcemanager.webapp.address</name> <value>${yarn.resourcemanager.hostname}:8088</value> </property> <!--NodeManager配置--> <property> <name>yarn.nodemanager.local-dirs</name> <value>/tmp/hadoop-yarn/nm-local-dir</value> </property> <property> <name>yarn.nodemanager.log-dirs</name> <value>/tmp/hadoop-yarn/nm-logs</value> </property> <!--NodeManager与ResourceManager通信配置--> <property> <name>yarn.nodemanager.remote-app-log-dir</name> <value>/tmp/hadoop-yarn/logs</value> </property> <property> <name>yarn.nodemanager.log-aggregation-dir</name> <value>/tmp/hadoop-yarn/logs</value> </property> <property> <name>yarn.log.server.url</name> <value>http://${yarn.resourcemanager.hostname}:19888/jobhistory/logs</value> </property> <!--YARN应用程序配置--> <property> <name>yarn.app.mapreduce.am.resource.mb</name> <value>1024</value> </property> <property> <name>yarn.app.mapreduce.am.command-opts</name> <value>-Xmx768m</value> </property> </configuration> ``` 需要注意的是,yarn-site.xml文件需要放置在Hadoop的配置目录下(默认为$HADOOP_HOME/etc/hadoop)。另外,如果你使用的是Hadoop集群,那么该文件需要在所有的节点上进行相应的修改和配置。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

AdminLog

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值