- 博客(2)
- 收藏
- 关注
原创 hadoop生态圈配置记录
创建生产者bin/kafka-console-producer.sh --broker-list master:9092,slave1:9092,slave2:9092,slave3:9092 --topic topictest。把压缩包移动到software里tar -zxvf apache-flume-1.9.0-bin.tar.gz -C /opt/module/解压tar -zxvf apache-zookeeper-3.6.3-bin.tar.gz -C /opt/module。
2025-05-05 21:01:16
1022
原创 虚拟机的hadoop运行环境构建
如果集群是第一次启动需要在zhadoop102格式化namenode,格式化NameNode,会产生新的集群id,导致NameNode和DataNode的集群id不一致,集群找不到已往数据。如果集群在运行过程中报错,需要重新格式化NameNode的话,一定要先停止namenode和datanode进程,并且要删除所有机器的data和logs目录,然后再进行格式化。相当于是一个软件仓库。选4gb提高效率,要考虑自身电脑的内存大小,确保能同时启动三个虚拟机也就是要有3×4=12的内存大小如果没有就看情况减小。
2025-05-03 09:43:04
596
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅