搭建
文章平均质量分 60
........
莫噶
如发现文章中有错误,欢迎私信、留言提醒。
展开
-
Flink搭建
6.访问http://主机:8081可以对flink集群和任务进行监控。Flink on yarn 基于Hadoop集群的yarn。2.进入conf修改flink-conf.yaml。7.停止Flink集群命令。5.启动Flink集群命令。3.启动Hadoop集群。4.分发到集群其他节点。3.修改wokers。原创 2024-05-29 10:43:21 · 252 阅读 · 0 评论 -
Spark安装(Yarn模式)
链接:https://pan.baidu.com/s/1O8u1SEuLOQv2Yietea_Uxg。五、修改spark-env.sh。四、 分发刚刚修改的配置文件。六、启动hadoop。原创 2024-02-07 20:41:54 · 785 阅读 · 1 评论 -
Hadoop搭建(完全分布式)
修改 /opt/module/hadoop-3.1.3/sbin/start-yarn.sh和 /opt/module/hadoop-3.1.3/sbin/stop-yarn.sh。修改 /opt/module/hadoop-3.1.3/sbin/start-dfs.sh和 /opt/module/hadoop-3.1.3/sbin/stop-dfs.sh。hadoop-3.1.3链接:https://pan.baidu.com/s/11yFkirCiT6tdo_9i1jWwkw。原创 2024-02-07 20:24:55 · 1123 阅读 · 1 评论 -
Kafka集群搭建
Kafka集群是把状态保存在Zookeeper中的,首先要搭建Zookeeper集群。链接:https://pan.baidu.com/s/1zxJRd13rgHfJexP-Jbl36g。6.修改bigdata2,bigdata3中的 server.properties和环境变量。依次在bigdata1、bigdata2、bigdata3节点上启动kafka。先启动Zookeeper集群,然后启动kafaka。5.分发bigdata2,bigdata3。当然,您也可以从官网下载。修改文件名,方便后续。原创 2024-02-01 21:48:10 · 541 阅读 · 1 评论 -
Flume搭建
百度盘链接:https://pan.baidu.com/s/1ZhSiePUye9ax7TW5XbfWdw。压缩包版本:apache-flume-1.9.0-bin.tar。2).复制一份flume-env.sh,命名为。3).修改配值文件flume-env.sh。1).切换到flume下面的conf。3. 修改用户和用户组的权限。原创 2024-02-01 20:42:35 · 926 阅读 · 1 评论 -
zookeeper搭建(单机模式和集群模式)
5.修改bigdata2和bigdata3中zookeeper下面data目录中的myid文件。1.新建data和logs目录(data目录用来存放数据库快照,logs目录用来存放日志文件)3.重命名 zoo_sample.cfg 为zoo.cfg。6.可以使用 status 命令查看zookeeper状态。2.找到zookeeper目录下的 conf 配置文件夹。进入data目录,新建myid文件。5.配置完之后就可以直接启动Zookeeper。4.用vi命令打开zoo.cfg文件。原创 2024-02-01 18:22:35 · 704 阅读 · 1 评论