大数据平台搭建(1)

最新推荐文章于 2024-07-08 14:05:12 发布

程序员QQ

最新推荐文章于 2024-07-08 14:05:12 发布

阅读量1.6k

点赞数

分类专栏： linux 文章标签： jdk 大数据

本文链接：https://blog.csdn.net/m0_37063257/article/details/78907759

版权

注意:因为博客中美元符号有特殊含义,所以将美元符号替换为&
涉及技术:
JDk1.8+zookeeper-3.4.10+hadoop-2.7.3.tar.gz+
hbase-1.3.1+scala-2.11.8.tgz+spark-2.1.0-bin-hadoop2.7+
apache-hive-2.3.2-bin.tar.gz+
mysql-5.7.20-linux-glibc2.12-x86_64.tar.gz

1.机器准备(一共准备5台机器,其中2台作为namenode,3台作为datanode)
D:\Virtual Machines\namenode01 namenode01 192.168.242.167 zookeeper
D:\Virtual Machines\namenode02 namenode02 192.168.242.168 zookeeper
D:\Virtual Machines\datanode01 datanode01 192.168.242.169 zookeeper
D:\Virtual Machines\datanode02 datanode02 192.168.242.170 zookeeper
D:\Virtual Machines\datanode03 datanode03 192.168.242.171 zookeeper

2.关于网络配置
a.主机名配置(vim /etc/sysconfig/network)
例如 HOSTNAME=namenode01
b.网络映射,即将IP与主机名绑定(vim /etc/hosts)
192.168.242.167 namenode01
192.168.242.168 namenode02
192.168.242.169 datanode01
192.168.242.170 datanode02