Flink
文章平均质量分 92
啥都仅会亿点点的猿
此人很懒,喜欢偶尔编辑文章
展开
-
Flink实战——历史服务器配置
读者在展开下文配置之前,首先确保已经部署了Flink1.17版本,同时对Yarn运行模式进行了相应配置,若读者尚未配置相关内容,可以查看。其次,找到Flink安装包的conf目录位置处(作者的目录位置为/opt/module/flink1.17/conf),(如本文是hadoop:8082)的方式,查看是否成功配置历史服务器,若页面非报错则历史服务器配置成功,否则反之。,其中namenode路径,hdfs设置的日志路径,历史服务器的Web页面以及历史服务器的归档位置,首先,采用如下的Linux命令,原创 2024-04-11 15:59:12 · 1077 阅读 · 0 评论 -
Flink实战——Yarn运行模式部署
会话模式下的相关Linux操作命令见下方:1. 开启Yarn会话命令(会话模式需要单独开启一个YARN会话2.命令行提交作业命令com.DemoDemo.jar其中,红色标注字体为用户根据实际情况所设定的类名和Jar包名。原创 2024-04-10 22:23:39 · 2050 阅读 · 0 评论 -
Flink实战——集群搭建
下图12展示了未启动Flink集群时的进程情况,图13展示了启动Flink集群后的进程情况。本文为三台节点服务器分配如下表2所示的集群角色,后文将针对表2所示情况,在Linux系统上搭建Flink1.17版本的集群。,本文默认读者已经安装和部署过Hadoop集群,故对Hadoop集群的相关安装部署不做相应介绍。文件配置完成后,用户依据个人情况,采用两种不同的方式分发配置文件。,则在其余两台节点服务器(hadoop01和hadoop02)上。上,其中,目录位置可以自定义,本文上传的目录位置为。原创 2024-04-09 17:00:25 · 2615 阅读 · 1 评论