Linux
文章平均质量分 50
希光之旅
想去周游世界
展开
-
Hadoop-HA 高可用集群(五)
1. 修改之前配置集群的名称三台机器执行:cd /opt/module/mv hadoop-2.7.2 hadoop-2.7.2-bak2. 重新解压安装包node-1上执行: cd /opt/software/ tar -zxvf hadoop-2.7.2.tar.gz -C ../module/ cd /opt/module/hadoop-2.7.2/etc/hadoop/3. 修改 hadoop-env.shvim hadoop-env.sh export JAVA_HOME原创 2021-01-21 16:55:57 · 193 阅读 · 0 评论 -
zookeeper安装(四)
1. 上传解压cd /opt/software/tar -zxvf zookeeper-3.4.10.tar.gz -C ../module/cd /opt/module/zookeeper-3.4.10/2. 创建zk临时文件存储目录mkdir -p z kData3. 拷贝配置文件准备修改cd /opt/module/zookeeper-3.4.10/conf/ cp zoo_sample.cfg zoo.cfg4. 修改配置文件修改:dataDir=/opt/module/原创 2021-01-18 15:11:25 · 223 阅读 · 0 评论 -
Hadoop完全分布式集群(三)
前面希光已经把所有的基础配置都讲得差不多了。现在一个个集群开始搭建啦! 今天就从最基础的Hadoop集群开始搭建吧。1.Hadoop的定义Hadoop是一个由Apache基金会所开发的分布式系统基础架构。它可以使用户在不了解分布式底层细节的情况下,开发分布式程序,充分利用集群的威力进行高速运算和存储。hadoop的框架最核心的设计就是HDFS和MapReduce,HDFS为海量的数据提供了存储,MapReduce则为海量的数据提供了计算。2.Hadoop的安装集群规划修改配置文件#.原创 2021-01-15 13:51:51 · 98 阅读 · 0 评论 -
Linux配置网络yum源和集群搭建前期准备(二)
Hello,昨天发布的如何配置模板机,没学会的小伙伴快去翻开看看呢! 因为今天希光给大家讲的内容是和昨天内容挂钩的哦!1.集群搭建#1.修改主机名:vim /etc/sysconfig/network#2.修改IP地址:vim /etc/sysconfig/network-scripts/ifcfg-eth0#3.删除网卡信息等待重新生成:rm -rf /etc/udev/rules.d/70-persistent-net.rules #4.配置ip-主机映射:vim /etc/.原创 2021-01-15 13:51:15 · 200 阅读 · 0 评论 -
Linux虚拟机安装jdk、配置MAC地址、关闭防火墙(一)
1.工具版本虚拟机软件:VMware12版本以上客户端软件:SecureCRT8.5 、或FinalShell、或Xshell5和Xftp5混合使用服务器:CentOS6.8英文、基础服务版软件版本:hadopp-2.7.2 (2.6版本上都行) zookeeper-3.4.10 hive-1.2.1 hbase-1.3.1 kafka-0.11 flume-1.7 sqoop-1.4.6 phoenix-4.14.3 ElasticSearch: 2.4.1 Logstash: 2.4.0 Kib原创 2021-01-15 13:50:33 · 413 阅读 · 0 评论