Flink集群之flink集群的启动问题：start-cluster.sh

最新推荐文章于 2023-08-27 11:13:15 发布
最新推荐文章于 2023-08-27 11:13:15 发布
阅读量5.4k 收藏 2
点赞数 2
分类专栏： # Flink 文章标签： flink
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_39338967/article/details/105214920
版权

flink的启动问题：
使用./start-cluster.sh启动，千万不能使用sh start-cluster.sh
为什么？
在这里插入图片描述
因为在start-cluster.sh中指定的解析器是/usr/bin/env bash，而不是我们常见的shell解析器，所以会出错，一般情况，只要不是shell解析器，都采用“./脚本名”的方式运行脚本

富有一文
关注
  • 2
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Flink源码之集群启动（1）
狗走猫步的数据世界
04-14 2838
Flink源码
start-cluster.bat（windows安装flink所需批处理文件）
08-15
start-cluster.bat（windows安装flink所需批处理文件）
Flink的standalone模式集群启动的流程及注意事项
01-20
1.进行相应的解压操作之后，对flink-conf.yaml、slaves文件进行配置 vi flink-conf.yaml 2. vi slaves来设置子节点 3.将主节点配置的文件复制到其他节点上scp -r /flink-1.9.2/ [email protected]:/yanxiaobo/（133节点同此命令） 4.进入bin目录执行 ./start-cluster.sh启动集群 （之前要做好ssh免密设置，可以省去输密码的麻烦） 5.查看Web UI 输入通过浏览器访问flink主节点的8081端口 http://192.168.198.129:8081
flink-shaded-hadoop-3-uber-3.1.1.7.1.1.0-565-9.0.jar
11-16
Flink-1.11.2与Hadoop3集成JAR包，放到flink安装包的lib目录下，可以避免Caused by: org.apache.flink.core.fs.UnsupportedFileSystemSchemeException: Hadoop is not in the classpath/dependencies.这个报错，实现Flink与Hadoop的集成
flink-1.11-StandaloneSession模式源码解读之脚本启动流程
喜讯XiCent 的博客
07-15 1038
还记得刚接触Flink的时候， 就是简简单单的配置了几个配置文件然后执行start-cluster.sh脚本集群就起来了。 接着打开flink web页面上传我们要执行jar包。 当初这一切看起来是多么简单，其实底层确蕴含着很多的逻辑， 今天我们就从start-cluster.sh脚本开始，一探究竟。 start-cluster.sh 我们先来看看start-cluster.sh这个脚本 bin=`dirname "$0"` bin=`cd "$bin"; pwd` # 先调用config.sh读取配置
Flink sql
CarloPan的博客
10-03 579
1) 启动flink (1.10 , 1.13.1版本) ./bin/start-cluster.sh [dq@mvxl11 flink-1.13.1]$ [dq@mvxl11 flink-1.13.1]$ ./bin/start-cluster.sh Starting cluster. Starting standalonesession daemon on host mvxl11. Starting taskexecutor daemon on host mvxl111. [dq@mvxl1..
Flink运行环境_Yarn
大数据进阶之路
06-07 734
Flink运行环境_Yarn 独立部署（Standalone）模式是由Flink框架本身提供计算资源，无需其他框架提供资源。这种方式降低了和其他第三方资源框架的耦合性，独立性非常强。但是由于Flink主要是计算框架，而不是资源调度框架，所以本身资源调度并不是它的强项。 把Flink应用提交给Yarn的ResourceManager，Yarn的ResourceManager会申请容器从Yarn的NodeManager上面，Flink会创建JobManager和TaskManager在这些容器上面，Flink会
Flink1.15源码解析--启动脚本----start-cluster.sh
chbxw
11-12 1097
flink-1.15源码解析
Flink 执行./bin/start-cluster.sh 提示需要输入登录密码
11111
07-10 2288
问题现象： 准备搭建Flink的standalone cluster模式，先单机点测试，配置如下 conf/masters 中配置本机IP conf/slaves 中配置本机IP 使用./bin/start-cluster.sh 启动集群的时候提示要输入本机密码，如果单独启动 ./bin/jobmanager.sh、 ./bin/taskmanager.sh是没用问题的 问题原因： 排查脚本发现bin/config.sh里面有这样一段逻辑 我没有配置主机名都是用ip地址的，官网文档写着也保
【flink脚本系列】 start-cluster.sh功能用法示例源码解析
最新发布
wang2leee的博客
08-27 143
该脚本用于启动 Flink 的 JobManager 和 TaskManager 实例。根据配置文件中的高可用性模式（HA Mode），决定是否以高可用模式启动。
Flink
LvJinYang的博客
10-22 2505
Flink 概述 之前的流处理都是以微批的形式来处理流，延迟较高 Flink 是构建在数据流之上的有状态的计算框架（structure Streaming也有状态）第三代大数据分析方案 2013年7月Storm开始在Apache孵化，2014年9月Storm成为Apache顶级项目（发展缓慢）。成为了当时最为主流的实时流处理框架。Storm以其低延迟高吞吐以及精准一次语义的处理，迅速的在各大互联网...
flink-table-runtime-blink_2.11-1.10.0-API文档-中文版.zip
04-23
赠送jar包：flink-table-runtime-blink_2.11-1.10.0.jar； 赠送原API文档：flink-table-runtime-blink_2.11-1.10.0-javadoc.jar； 赠送源代码：flink-table-runtime-blink_2.11-1.10.0-sources.jar； 赠送Maven依赖...
flink-connector-kafka_2.11-1.7.1-API文档-中英对照版.zip
07-14
赠送jar包：flink-connector-kafka_2.11-1.7.1.jar； 赠送原API文档：flink-connector-kafka_2.11-1.7.1-javadoc.jar； 赠送源代码：flink-connector-kafka_2.11-1.7.1-sources.jar； 赠送Maven依赖信息文件：flink-...
flink启动后web访问问题
lubingxue7048的专栏
11-01 4610
在执行./start-cluster.sh 后，flink进程的监听ip端口是。这样只能本机进行访问，外部服务器是访问不了的，出现这个问题的原因是flink的。所以启动后就解析到127.0.0.1了。, 进程启动时会按照这个主机名从。
Flink集群搭建及运行模式
糊里糊涂走进大数据的小菜鸡
01-19 459
local 本地测试 idea运行 flink集群测试 1、standallone cluster 1、准备工作 配置JAVA_HOME 免密钥 2、上传解压 tar -xvf flink-1.11.0-bin-scala_2.11.tgz 配置环境变量 vim /etc/profile 3、修改配置文件(如果是伪分布式，就不需要修改配置文件) vim conf/flink-conf.yaml jobmanager.rpc.address: master 主节点ip地址 vim
Flink：standalone模式下start-cluster.sh之后taskmanager没起来
Jodness' Blogs
08-15 7350
我的版本：Flink1.7.2、jdk1.8.0_201 下午照着Flink官网部署了一下standalone模式，通过start-cluster.sh命令启动Flink集群后发现只有StandaloneSessionClusterEntrypoint进程起来了，并没有TaskManagerRunner，并且8081网页中taskmanager个数为0 后来查看了taskmanager节点lo...
轻松通关Flink第06讲：Flink 集群安装部署和 HA 配置
sucaiwa的博客
03-26 921
本课时我们讲解了 Flink 的三种部署模式和高可用配置，并且对这三种部署模式的适用场景进行了讲解。在生产上，我们最常用的方式当然是 Flink on Yarn，借助 Yarn 在资源管理上的绝对优势，确保集群和任务的稳定。
Flink本地集群部署启动&常见问题的解决方法
Appreciate(欣赏)
07-16 1808
访问页面http://localhost:8081/#/overviewi页面slots卡槽数正确展示说明启动成功。解决方法：设置taskmanager和jobmanager允许所有机器连接。启动成功taskmanager会出现如下进程。启动集群在jobmanager那台机器启动。启动成功jobmanager会出现如下进程。解决方法，检查以下配置是否正确。
怎么判断start-cluster.sh是否启动flink集群成功
06-01
在启动 Flink 集群时，可以通过以下几种方式来判断 start-cluster.sh 是否启动成功： 1. 查看日志文件：Flink 启动时会生成日志文件，如果启动成功，则可以在日志文件中看到类似于 "Starting JobManager" 或 ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值