flink 1.11.2的部署

最新推荐文章于 2024-04-16 18:41:19 发布
最新推荐文章于 2024-04-16 18:41:19 发布
阅读量699 收藏
点赞数 1
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44041700/article/details/109162676
版权

\1.下载地址
https://flink.apache.org
or 直接找tgz
https://www.apache.org/dyn/closer.lua/flink/flink-1.11.2/flink-1.11.2-bin-scala_2.11.tgz
\2.解压到/usr/flink下
\3.启动

/usr/flink/bin$ ./start-cluster.sh

\4.jps查看

9330 StandaloneSessionClusterEntrypoint
9749 Jps
9641 TaskManagerRunner

\5.测试词频统计
/usr/flink/in.txt 是自己创建的输入文件，/usr/flink/out.txt是输出文件

root@cold-ThinkStation-P300:/usr/flink# bin/flink  run /usr/flink/examples/batch/WordCount.jar --input /usr/flink/in.txt --output /usr/flink/out.txt
来杯Sherry
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论
Apache Flink-1.11.2---环境部署
xys2333的博客
01-29 479
一、Apache Flink简述： 分布式大数据处理引擎，可以对有限流和无限流进行有状态的计算，可以部署在各种集群环境，对大小的数据规模进行快速计算。基于数据流的有状态计算。 二、环境部署 1.环境说明： IP：192.168.56.77 部署位置：/usr/flink/flink-1.11.2 2.下载地址： Wgethttp://mirror.bit.edu.cn/apache/flink/flink-1.11.2/flink-1.11.2-bin-scala_2.11.tgz .
flink 1.11.2 的安装记录
采集啄米记录贴
10-20 1072
背景 计划将之前部署好的flink1.10升级到1.11.2。 主要流程及踩坑 1.从官方下载flink1.11.2的压缩包，选择与业务程序中导入的maven依赖scala版本一致即可（本人选用的是2.11）。 flink压缩包官方下载链接 2.修改对应的配置文件（yarn模式下只需配置flink-conf.yaml， 如果是使用flink自己的资源调度则简单配置masters、workers文件即可）。flink 1.10与1.11.2的配置项基本没有太多差别，配置参考之前的文档...
01-Flink安装部署及入门案例（仅供学习），字节大牛教你手撕大数据开发学习
2303_79055785的博客
04-16 260
使用Flink计算引擎实现离线批处理：词频统计WordCount，TODO：从Flink 1.12开始，流批一体化，API统一，设置执行模式即可。转换二元组：(spark, 1) (flink, 1) (spark, 1)， TODO：Flink Java API中提供元组类Tuple。分组：spark -> [(spark, 1), (spark, 1)] flink -> [(flink, 1)]-yd：分离模式（后台运行，不指定-yd, 终端会卡在提交的页面上）
Flink Standalone环境的搭建
duzm200542901104的专栏
06-09 288
1、下载文件：flink-1.11.2-bin-scala_2.12.tgz https://archive.apache.org/dist/flink/flink-1.11.2/ 2、解压文件： tar -xvf flink-1.11.2-bin-scala_2.12.tgz ssh aucd@10.101.93.131 aucd/vivoopenstack ssh aucd@10.101.93.156 3、配置文件： 10.101.93.156 master 10.101.93.131 wor.
Flink学习（二）-- Flink安装与简单使用
he3more的博客
11-22 371
最近在学习Flink流处理框架，自己试着在机子上部署了个flink，这里以简单的local模式为例，安装方式较为简单，仅供学习之用，正式生产上使用的话主要有standalone集群模式，Yarn模式以及k8s部署这几种模式 前置准备 Java 1.8.x或更高版本 首先确保自己机子上是否已经安装了jdk1.8或者更高版本，flink的运行是需要依赖于java环境的 安装步骤 下载 这里以最新的flink-1.11.2版本为例 官网：https://flink.apache.org/downloads
Flink 部署
热门推荐
mengxianglong123的博客
03-26 1万+
这里需要提到 Flink 中的几个关键组件：客户端（Client）、作业管理器（JobManager）和任务管理器（TaskManager）。我们的代码，实际上是由客户端获取并做转换，之后提交给 JobManger 的。所以 JobManager 就是 Flink 集群里的“管事人”，对作业进行中央调度管理；而它获取到要执行的作业后，会进一步处理转换，然后分发任务给众多的TaskManager。这里的 TaskManager，就是真正“干活的人”，数据的处理操作都是它们来做的， 一、快速启动一个 Fli.
flink-1.11.2-src.tgz
10-28
flink-1.11.2-src.tgz 官网下载比较慢的，可以到csdn这里下载哦.........
flink-1.11.2-bin-scala_2.12 linux安装包
10-14
flink-1.11.2-bin-scala_2.12 linux安装包
flink-1.11.2-bin-scala_2.11.tgz
11-03
flink包，解压即可用，
flink standalone部署的dockerfile
04-26
flink 独立集群部署的dockerfile、dockercompose文件
Flink 集群部署模式.pdf
最新发布
04-26
flink 集群部署模式.pdf
Flink三种安装部署方式（HA）
weixin_45131680的博客
10-27 519
Flink提供了多种部署方式，本文只介绍三种常用方式，local、standalone、yarn。
【Flink】flink的安装部署（1）
hx1156477702的博客
10-04 2360
Flink集群的搭建，local，standalone，flink on yarn。
Flink 安装部署与快速入门
qq_43528451的博客
01-27 1667
(一)、Flink 安装部署与快速入门（xxbj） 一、flink概述 1、为什么选用flink？ 不仅仅是一个高吞吐、低延迟的计算引擎，同时还提供很多高级的功能。：有状态的计算、支持强一致性语义以及至此基于Event Time的WaterMark对延迟或者乱序的数据进行处理 2、flink组件 物理部署层 本地、独立集群、yarn管理集群上、云上 runtime核心层 该层为上层不同接口提供基础服务；也是flink分布式计算框架的核心实现层支持分布式stream作业的执行、jobgraph到ex
Flink学习之旅：（一）Flink部署安装
小健的博客
10-18 1670
进入Flink官网，点击Downloads往下滑动就可以看到 Flink 的所有版本了，看自己需要什么版本点击下载即可。
flink安装部署
myself_ning的博客
08-10 2167
flink多种模式的安装部署
Flink local模式、Standalone模式、Standalone 高可用(HA)模式的安装部署
zhengzaifeidelushang的博客
11-13 654
Flink的安装与部署 Flink的安装和部署主要分为本地模式和集群模式。 本地模式只需直接解压就可以使用，不需要修改任何参数。 集群模式主要包含Standalone、Flink on Yarn模式，适合在生产环境下面使用，需要修改对应的配置参数。 安装Flink需要以下基础环境： Linux环境，使用CentOS7服务器。 JDK1.8，配置JAVA_HOME环境变量。 一 、Flink下载 Flink下载地址： https://flink.apache.org/downloads.html 二
Flink 1.11.2 在K8s里基于NFS搭建高可用集群
carcoon的专栏
09-19 2355
1.修改镜像 1.1 从官网获取Dockerfile源码 github 地址 https://github.com/apache/flink-docker 修改1.11/scala_2.11-java8-debian 目录下的docker-entrypoint.sh #!/bin/sh ############################################################################### # Licensed to the Apache Softw
基于Flink1.11.2 多表join与维表join
qq_31866793的博客
09-29 4850
1，业务场景：之前离线的业务场景，想通过实时来实现。离线业务是多个表join，因为接入的myslqbinlog的数据，所以数据存在修改跟删除，这个是跟日志分析最大的区别，因为日志分析啥的数据只有新增，相对来说考虑的东西就少了很多。 2，首先我们要实现的是多表join，这个相对还是比较简单的，比如下面的SQL： 3，但是3个表join可是全量join的，也就是说表的state是一直存在的，总会存在OOM爆炸的时候，那怎么办呢。 在我们使用window窗口的时候，一个窗口结束之后会帮我们...
flink分布式部署
07-27
Flink是一个开源的流处理和批处理框架，支持分布式部署。下面是Flink分布式部署的一般步骤： 1. 确保你有一个Flink集群：Flink需要在一个或多个计算机上运行，形成一个集群。你可以在每台计算机上安装Flink，也可以...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

来杯Sherry

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值