Flink集群之flink集群的启动问题：start-cluster.sh

最新推荐文章于 2025-09-23 10:17:14 发布
原创 最新推荐文章于 2025-09-23 10:17:14 发布 · 5.7k 阅读 · 2 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#flink

本文讲解了使用Flink集群时，正确启动方法的重要性。强调了使用./start-cluster.sh而非直接sh start-cluster.sh的原因，深入解析了脚本解析器对启动过程的影响。

flink的启动问题：
使用./start-cluster.sh启动，千万不能使用sh start-cluster.sh
为什么？
在这里插入图片描述
因为在start-cluster.sh中指定的解析器是/usr/bin/env bash，而不是我们常见的shell解析器，所以会出错，一般情况，只要不是shell解析器，都采用“./脚本名”的方式运行脚本

【flink脚本系列】 start-cluster.sh功能用法示例源码解析
wang2leee的博客
08-27 441
该脚本用于启动 Flink 的 JobManager 和 TaskManager 实例。根据配置文件中的高可用性模式（HA Mode），决定是否以高可用模式启动。
Flink运行环境_Yarn
大数据进阶之路
06-07 881
Flink运行环境_Yarn 独立部署（Standalone）模式是由Flink框架本身提供计算资源，无需其他框架提供资源。这种方式降低了和其他第三方资源框架的耦合性，独立性非常强。但是由于Flink主要是计算框架，而不是资源调度框架，所以本身资源调度并不是它的强项。 把Flink应用提交给Yarn的ResourceManager，Yarn的ResourceManager会申请容器从Yarn的NodeManager上面，Flink会创建JobManager和TaskManager在这些容器上面，Flink会
Flink 初体验10 分钟完成下载、安装、本地集群启动与示例作业运行
最新发布
hello.reader
09-23 1815
主要内容包括：环境准备（Java 11）、Flink下载与解压、本地集群启动/停止、提交WordCount示例作业、Web UI监控任务运行状态。同时提供了Docker快速体验方案、常见问题排查方法及后续学习建议，帮助用户掌握Flink的核心操作闭环（下载→启动→提交→观察），为后续深入流式计算打下基础。
轻松通关Flink第06讲：Flink 集群安装部署和 HA 配置
sucaiwa的博客
03-26 1345
本课时我们讲解了 Flink 的三种部署模式和高可用配置，并且对这三种部署模式的适用场景进行了讲解。在生产上，我们最常用的方式当然是 Flink on Yarn，借助 Yarn 在资源管理上的绝对优势，确保集群和任务的稳定。
Flink1.15源码解析--启动脚本----start-cluster.sh
chbxw
11-12 1517
flink-1.15源码解析
Flink集群的启动
先云的博客
01-01 5061
导读：记录一下Flink源码的阅读过程 Flink版本：1.4.2 1.start-cluster.sh   集群启动的脚本，在脚本中通过运行jobmanager.sh和TMSlaves start来启动JobManager和TaskManager。其中TMSlaves定义在config.sh中。 2.config.sh   这里只看一下TMSlaves()函数，可以看到其是通过调用ta...
bash: start-cluster.sh: command not found 这个怎么处理？
08-20
在 Windows 系统中启动 Flink 集群时遇到 `bash: start-cluster.sh: command not found` 错误，通常是因为系统无法识别 `.sh` 脚本的执行环境。Flink 的启动脚本是基于 Bash 的，而 Windows 命令行默认不支持直接...
Flink源码之集群启动（1）
狗走猫步的数据世界
04-14 3000
Flink源码
怎么判断start-cluster.sh是否启动flink集群成功
06-01
在启动 Flink 集群时，可以通过以下几种方式来判断 start-cluster.sh 是否启动成功： 1. 查看日志文件：Flink 启动时会生成日志文件，如果启动成功，则可以在日志文件中看到类似于 "Starting JobManager" 或 ...
flink-1.16.2下载安装包，flink-1.16.2-bin-scala-2.12.zip
02-29
- **启动与停止**：使用`bin/start-cluster.sh`启动Flink集群，`bin/stop-cluster.sh`停止集群。 5. **运行示例** - **WordCount**：Flink的标准入门示例，统计文本流中的单词出现次数。 - **提交作业**：通过`...
Flink
LvJinYang的博客
10-22 2752
Flink 概述 之前的流处理都是以微批的形式来处理流，延迟较高 Flink 是构建在数据流之上的有状态的计算框架（structure Streaming也有状态）第三代大数据分析方案 2013年7月Storm开始在Apache孵化，2014年9月Storm成为Apache顶级项目（发展缓慢）。成为了当时最为主流的实时流处理框架。Storm以其低延迟高吞吐以及精准一次语义的处理，迅速的在各大互联网...
Flink源码解析（一）start-cluster.sh脚本分析
Yuan_CSDF的博客
05-24 1296
为深入的理解Flink的工作机制，从现在开始学习Flink源码。包括Flink集群启动流程，任务执行流程。 1.start-cluster.sh 在图中可以看到 。Flink的JobManager与TaskManager都是通过flink-daemon.sh来启动。 传入到flink-daemon.sh脚本大致分别为： JobManager：flink-daemon.sh start standalonesession TaskManger：flink-daemon.sh start task
flink打开集群“[ERROR]flink-1.10.1/bin/config.sh: line 633: java: command not found”解决方法
打孔员的博客
03-07 1676
今天跟着尚硅谷的B站视频学习flink，配好环境变量后一直无法打开集群。提示下图的错误，百度找了一个下午，都找不到答案，后面自己捣鼓出来了，分享出来让遇到相同问题的同学可以快速解决。 [ERROR] Unexpected result: /mnt/d/Tools/flink-1.10.1/bin/config.sh: line 633: java: command not found [ERROR] The last line of the BashJavaUtils outputs is expecte
linux 下执行.sh文件提示permission denied
丑小鸭
10-12 2123
今天执行.sh文件懂得时候提示 permission denied错误 解决办法： chmod 777 file.sh 或者 chmod+x  file.sh 修改文件的权限即可。
Flink集群启动脚本分析(standalone模式)
weixin_44852067的博客
03-28 1190
1.概述   Flink 集群的启动脚本在：flink-dist 子项目中，位于 flink-bin 下的 bin 目录：启动脚本为：start-cluster.sh。flink-bin 目录管理的是集群运维需要的shell脚本。 2.启动脚本 2.1 start-cluster.sh 调用 config.sh 来获取 masters 和 workers，masters 的信息(从 conf/masters 配置 文件中获取) 通过 jobmanager.sh 来启动 JobManager
Flink 执行./bin/start-cluster.sh 提示需要输入登录密码
11111
07-10 2832
问题现象： 准备搭建Flink的standalone cluster模式，先单机点测试，配置如下 conf/masters 中配置本机IP conf/slaves 中配置本机IP 使用./bin/start-cluster.sh 启动集群的时候提示要输入本机密码，如果单独启动 ./bin/jobmanager.sh、 ./bin/taskmanager.sh是没用问题的 问题原因： 排查脚本发现bin/config.sh里面有这样一段逻辑 我没有配置主机名都是用ip地址的，官网文档写着也保
start-cluster.sh启动jobmanager失败
bb123116的博客
05-14 1896
报错说没设置 JobManager memory configuration failed: Either required fine-grained memory (jobmanager.memory.heap.size), or Total Flink Memory size (Key: ‘jobmanager.memory.flink.size’ , default: null (fallback keys: [])), or Total Process Memory size (Key: ‘jobm
Flink 1.12.2 源码浅析 : 相关启动脚本
张伯毅的专栏
03-11 5187
.一 .前言二 .start-cluster.sh2.1. 加载全局配置函数config.sh2.2. 启动 jobManger2.3. 启动TaskManager实例2.4. 完整代码三 .jobmanager.sh四 .taskmanager.sh五 .flink-daemon.sh5.1.JobManager启动指令5.2.TaskManger启动指令 一 .前言 主要看一下Flink常用的几个脚本调用. 服务 入口类 备注 taskexecutor org.apache.flink
Flink集群部署
Siobhan_Mxin的博客
12-13 3516
flink环境搭载
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值