![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop集群搭建
hadoop集群搭建
小呀么小白兔
这个作者很懒,什么都没留下…
展开
-
hadoop集群搭建之:---Zookeeper安装
分布式安装部署1)集群规划在hadoop102、hadoop103和hadoop104三个节点上部署Zookeeper。2)解压安装(1)解压Zookeeper安装包到/opt/module/目录下$ tar -zxvf zookeeper-3.5.7.tar.gz -C /opt/module/(2)修改/opt/module/apache-zookeeper-3.5.7-bin名称为zookeeper-3.5.7$ mv apache-zookeeper-3.5.7-bin/原创 2020-11-09 19:14:59 · 280 阅读 · 0 评论 -
项目经验之支持LZO压缩配置
项目经验之支持LZO压缩配置1.将编译好后的hadoop-lzo-0.4.20.jar 放入hadoop-3.1.3/share/hadoop/common/2.同步hadoop-lzo-0.4.20.jar到hadoop103、hadoop1043.core-site.xml增加配置支持LZO压缩 <configuration> <property> <name>io.compression.codecs...原创 2020-11-09 19:08:52 · 228 阅读 · 0 评论 -
hadoop集群搭建之二:---hadoop安装
完全分布式运行模式分析:1)准备3台客户机(关闭防火墙、静态ip、主机名称)2)安装JDK3)配置环境变量4)安装Hadoop5)配置环境变量6)配置集群7)单点启动8)配置ssh9)群起并测试集群Hadoop部署1)集群部署规划注意:NameNode和SecondaryNameNode不要安装在同一台服务器注意:ResourceManager也很消耗内存,不要和NameNode、SecondaryNameNode配置在同一台机器上。在这里插入图片描述2)将hadoop-3原创 2020-11-09 18:53:44 · 128 阅读 · 0 评论 -
hadoop集群搭建之一: jdk安装
环境基础---安装jdk1.1)卸载现有JDK#sudo rpm -qa | grep -i java | xargs -n1 sudorpm -e --nodeps2)上传JDK软件包到Linux系统下的/opt/software #ls /opt/software/3)解压JDK到/opt/module目录下 # tar -zxvf jdk-8u212-linux-x64.tar.gz -C /opt/module/4)配置JDK环境变量(1)新建/et...原创 2020-11-09 18:38:18 · 253 阅读 · 1 评论