Hadoop
文章平均质量分 64
大数据测试学习
努努&威朗普
负琴生
展开
-
ELK日志分析系统
文章目录ELK日志分析系统ELK日志分析系统E:ElasticSearch ClusterL:LogStash AgentK:kibana Server原创 2021-01-05 15:48:39 · 256 阅读 · 1 评论 -
滚动升级HDFS HA cluster
滚动升级HDFS cluster原创 2023-04-17 15:39:22 · 319 阅读 · 0 评论 -
Hadoop-3.3.5伪分布式安装
hadoop-3.3.5伪分布式安装,并做了一些优化配置原创 2023-03-29 19:23:07 · 888 阅读 · 0 评论 -
GreenPlum扩容节点
扩容分为纵向扩容和横向扩容纵向扩容:增加segment数量横向扩容:增加节点数纵向扩容和横向扩容过程很相似,操作上只有很小的区别。原创 2022-08-25 16:52:29 · 346 阅读 · 0 评论 -
完全分布式hadoop3.1.3集群搭建
各组件和机器间的对应关系如下表hadoop100hadoop101hadoop102HDFSNameNode DataNodeDataNodeSecondaryNameNode DataNodeYARNNodeManagerResource Manager NodeManagerNodeManager原则上是NameNode和SecondaryNameNode不在一台机器上;而且ResourceManager消耗资源比较高,放在资源相对充足的原创 2022-02-13 00:06:51 · 1108 阅读 · 0 评论 -
Hadoop3.1.3简单测试使用
Hadoop3.1.3简单测试使用上一章:Hadoop3.1.3安装测试使用hadoop统计一个文档中各个词语出现的次数cd /root/mkdir input && cd inputvi word.txt冷雨冷雨GieGie大帅B 丑B丑Bskr冷雨# 保存,退出hadoop jar /usr/local/hadoop-3.1.3/share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.3.jar wordcou原创 2022-02-12 18:37:52 · 695 阅读 · 0 评论 -
Hadoop3.1.3安装
Hadoop3.1.3安装配置JDK环境Linux配置JDK环境下载安装hadoop3.1.3hadoop3.1.3下载地址tar zxvf hadoop-3.1.3.tar.gz -C /usr/local/cd /etc/profile.d/cat >> my_env.sh << 'EOF'#HADOOP_HOMEexport HADOOP_HOME=/usr/local/hadoop-3.1.3export PATH=$HADOOP_HOME/bin:$原创 2022-02-12 12:11:00 · 2057 阅读 · 0 评论 -
hadoop常见架构
原创 2022-02-10 14:29:57 · 1332 阅读 · 0 评论 -
Kerberos认证--图解
kerboros认证原创 2021-11-22 11:40:26 · 930 阅读 · 0 评论 -
Kafka集群搭建
文章目录一、环境二、搭建kafka集群三、启动并测试3.1 启动kafka3.2 测试一、环境三台主机hostnameipzk01192.168.80.10zk02192.168.80.11zk03192.168.80.12已经搭建好zookeeper集群,参见 zookeeper集群搭建复用zookeeper集群的三台机器,搭建kafka集群。kafka-3.0:下载地址:https://mirrors.tuna.tsinghua.edu.cn/原创 2021-10-21 15:44:02 · 277 阅读 · 0 评论 -
zookeeper集群搭建
文章目录zookeeper集群搭建一、环境二、搭建zookeeper集群2.1 准备java环境2.2 下载解压zookeeper2.3 创建数据目录和日志目录2.4 更改配置文件2.5 输入myid2.6 配置zookeeper环境变量三、启动zookeeper集群3.1 常用命令3.2 日志3.3 启动3.4 测试3.5 详细日志zookeeper集群搭建一、环境三台主机hostnameipzk01192.168.80.10zk02192.168.80.11原创 2021-10-20 19:26:37 · 1087 阅读 · 0 评论