大数据
大数据相关技术分享
零度爱情12138
一起努力吧。
展开
-
zookeeper3.6.0集群部署,动态更新配置
修改配置文件conf/zoo_sample.cfg 修改名称 zoo.cfg# 定义文件存储目录dataDir=/opt/module/apache-zookeeper-3.6.0-bin/zkDate# 定义集群节点server.2=hadoop02:2888:3888server.3=hadoop03:2888:3888server.4=hadoop04:2888:3888...原创 2020-04-04 18:44:57 · 1832 阅读 · 0 评论 -
flume集群搭建
准备工作JDKflume开始部署解压flume,进入conf目录,配置JAVA_HOMEflume-env.sh.template 名称更改为 flume-env.sh# 配置自己的jdk路径export JAVA_HOME=/opt/module/jdk1.8.0_231/案例一,监控本机端口监控本机端口使用telnet工具向端口发送数据控制台打印收到的信息...原创 2020-04-28 20:43:57 · 319 阅读 · 0 评论 -
hive2.3.x的配置和使用
准备工作JDKhadoophive开始使用解压hive,进入conf目录,配置hadoophive-env.sh.template 名称更改为 hive-env.sh配置自己的hadoop路径和配置文件路径HADOOP_HOME=/opt/module/hadoop-2.10.0/export HIVE_CONF_DIR=/opt/module/apache-hive-2.3...原创 2020-04-29 22:41:14 · 833 阅读 · 0 评论 -
hadoop2.10.0完全分布式集群搭建+ HA(QJM)高可用集群搭建
准备工作JDK1.8hadoop 2.10.0centos 7VMware准备3台虚拟机,部署规划如下ipNameNodeSecondaryNameNodeResourceManagerDataNodeNodeManager192.168.0.1yesnonoyesyes192.168.0.2noyesnoyesyes19...原创 2020-04-03 20:49:01 · 1294 阅读 · 0 评论