Flink单机模式安装

最新推荐文章于 2023-12-09 23:37:41 发布
最新推荐文章于 2023-12-09 23:37:41 发布
阅读量4.4k 收藏 2
点赞数 2
分类专栏： 大数据计算框架 - Flink
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/jikui0581/article/details/97270581
版权

Linux运行环境搭建一个单机版Flink运行环境

Flink 下载地址：Flink官网

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

  1. 下载Flink程序包：flink-1.8.1-bin-scala_2.11.tgz
  2. 部署在Linux服务器上，然后以单机模式运行
    # cd flink
# tar xzf flink-1.8.1-bin-scala_2.11.tgz
# cd flink-1.8.1
# ./bin/start-cluster.sh
  3. 启动成功后，浏览器访问 ip:8081，即可访问Flink的web Dashboard

在这里插入图片描述

运行Flink自带的SocketWindowWordCount示例程序

  1. 启动新终端运行一个端口号为9000的Socker server
nc -l 9000
  1. 运行SocketWindowWordCount应用程序
./bin/flink run examples/streaming/SocketWindowWordCount.jar --port 9000

3.运行命令获取运行结果

tail -f log/flink-*-taskexecutor-*.out

输入示例
输入样例

李思净
关注
  • 2
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【大数据Flink系列】Flink单机模式和集群搭建
weixin_54707168的博客
03-26 887
【大数据Flink系列】Flink单机模式和集群搭建
【Flink】Flink（一）单节点启动以及集群环境启动
JeffHan^_^的博客
04-26 1280
在进行Flink部署之前，我们需要事先准备好以下几个条件1.()两台虚拟机2.(推荐)固定以下两台Centos的IP可以参考下面文章3.(推荐)配置SSH免密登录参考下面文章4.()配置Java环境参考下面文章前半段5.()下载Flink安装包我这里下载的是flink1.17版本。
【flink】上传jar并执行
热门推荐
叁滴水 的博客
01-13 1万+
过idea编写flink工程，并且导出可执行jar,上传到flink执行的过程，请大家参考。
flink打包运行
cobracanary的博客
04-30 5841
一个简单的flink打包运行的demo 第一步：环境准备 首先你要有个flink运行环境，我这里是使用虚拟机搭建的单机模式，启动flink，在8081端口就可以看见flink UI，在这里就可以进行flink作业的管理： 第二步：flink代码的编写 我使用flink SQL编写的代码，代码很简单，使用SQL读入kafka中一个topic的消息，写入另一个kafka topic中： package com.ms.flinksql; import org.apache.flink.table.api..
【Flink】搭建单机环境
fanfan4569的博客
06-22 3914
搭建单机版环境 一 安装环境 搭建一个单机版的运行环境 环境：Ubuntu 18 下载不带Hadoop组件的Flink程序包 这里按下载最新：Apache Flink 1.8.0 for Scala 2.11 (asc, sha512) 官网地址：https://flink.apache.org/downloads.html#apache-flink-180 解压运行 tar x...
Flink安装部署{单机模式、会话模式(集群部署)、yarn模式(包含hadoop3.1.3部署)}
四维大脑的博客
04-18 3076
flink各种部署方式，内部包含hadoop3.1.3集群部署 单机模式、会话模式(集群部署)、yarn模式(包含hadoop3.1.3部署
Flink安装包、安装文档
05-14
Apache Flink是一个强大的实时计算平台，其安装过程简单，可以通过单机或分布式模式运行。Flink-shaded-hadoop-2-uber-2.6.5-10.0.jar是Flink与Hadoop兼容的关键组件，确保了在没有完整Hadoop环境下的作业执行。理解...
FlinkCDC第二部分-搭建Flink单机服务，ctrl就完事~
07-05
**启动Flink单机服务：** 1. 打开终端，进入Flink的bin目录，例如`cd /usr/local/flink/bin`。 2. 启动Flink的JobManager（Master），运行`./start-local.sh`命令。这将在后台启动一个JobManager进程。 3. 在同一...
Flink基础教程.rar
09-15
1. Local：本地单机模式，适合开发和测试。 2. Cluster：分布式集群模式，如YARN、Mesos或Kubernetes。 3. Standalone：独立的Flink集群，无需依赖其他资源管理系统。 七、实战案例 本教程中可能会涵盖如何使用...
flink-1.7超详细中文教程
最新发布
03-17
1. **本地运行与集群部署**：比较本地单机模式和分布式集群部署的区别与设置。 2. **资源管理**：介绍如何结合YARN、Kubernetes等资源调度器进行Flink作业的管理。 3. **监控与调试**：学习使用Flink的Web UI、 ...
小镜子提升之flink1.12
07-18
5. 启动Flink：执行 `bin/start-cluster.sh` 启动本地集群，`bin/start-local.sh` 可启动单机模式。 6. 测试运行：通过提交一个简单的WordCount示例，验证Flink是否安装成功。例如，运行 `bin/flink run examples/...
04 本地部署（单机模式）
codemosi的专栏，点击我可以跳到目录一栏
11-11 1325
本地部署 本文档的目的是提供有关如何在一台机器运行Flink。 DownloadRequirementsConfigurationStarting Flink 下载 去下载页面，下载运行包。如果你的应该里用到了Hadoop或者hbase，一定要确认和你下载的flink所依赖的Hadoop版本匹配。当有疑问或您计划只与本地文件系统，可以下载Hadoop 1.2的Fli
Flink 本地单机/Standalone集群/YARN模式集群搭建
程序猿进阶
12-09 2079
集群，任务之间相互独立，互不影响，方便管理。任务执行完成之后创建的集群也会消失。现在，您的 Flink系统已启动并正在运行。现在，在本地节点上运行的。分离模式（与当前客户端无关，当客户端提交完任务就结束，不用等到。提供集群中所有节点的列表，这些列表将用作工作节点。，添加该配置表示内存超过分配值，是否将任务杀掉。集群，开辟指定的资源，以后提交任务都向这里提交，这个。文件中列出的所有辅助节点，以在每个节点上启动。得到结果，这里统计的是默认的数据集，可以通过。页面看看，如果没有修改配置中的端口，默认是。
hive执行jar包报错：Invalid signature file digest for Manifest main attributes
MDJ_D2T的博客
08-24 563
重新打包，排除包中的 *.SF *.DSA *.RSA 文件； 修改 jar包的pom文件后，重新打包即可； <plugin> <groupId>org.apache.maven.plugins</groupId> <artifactId>maven-shade-plugin</artifactId> <version&gt
Flink(1)-安装单机模式
njiang的专栏
12-16 6007
官网地址https://ci.apache.org/projects/flink/flink-docs-release-1.7/tutorials/local_setup.html 1.下载flink从官网 https://flink.apache.org/downloads.html 2.选择自己的版本 3.进行下载 4.解压缩 5.启动 6.页面访问 http:...
Linux安装Flink及其环境配置
相互学习 共同进步
06-19 2722
使用StandAlone模式，需要启动Flink的主节点JobManager以及从节点TaskManager（1）Application模式（2）Per-Job模式（3）Session模式。
flink在Windows下单机启动及开发简单demo示例
qq_37720936的博客
03-06 2425
Flink是一款兼顾批处理和流处理的数据处理框架，具体的介绍网上很多，就不做赘述了，这篇主要讲一下环境启动及一个最简的运行示例，关于flink和sink、slot和parallelism相关内容见后续文章，同时这里只针对Windows系统进行操作，Linux的操作大同小异，不做单独说明。 首先在官网下载解压，这一步就不多说了，可自行选择需要的版本，这里使用1.9.2（刚下载完没过一周就出了1.1...
【Flink系列】Flink运行模式还傻傻分不清？快来看看吧
qq_39388986的博客
04-21 4555
关注、星标公众号【 大数据之美 】，和你一起成长 Flink 的部署方式跟 Spark 一样，是非常灵活的，可以支持Local、Standalone、Yarn、Mesos、Docker、Kubernetes等现在常见的部署模式。这些部署模式是 Flink 计算时所需资源的管理的不同方式，所以可以理解为是资源管理方式。 在具体的应用场景中，如何跟计算资源交互，对于集群资源分配和占用的方式，可能会有特定的需求。所以 Flink 为各种场景提供了不同的运行模式，主要有以下三种： 会话模式（Session
Flink 分布式运行模式
wangyu1025391259的博客
01-17 517
分布式运行模式如下图：          JobManagers（Master）: 主要的作用是管理tasks；安排checkpoint；失败以后重启 。 通常情况下只有一个JobManager，但是如果是需要其成为高可用的集群，可以配置多个JobManager，但是只有一个活跃的JobManager，其他的都是standby         TaskManagers（worker）: 主...
flink单机模式部署
11-08
但是，也可以在单机上运行FLINK，这被称为FLINK单机模式部署。下面是FLINK单机模式部署的步骤： 1. 下载FLINK二进制文件并解压缩。 2. 修改FLINK配置文件flink-conf.yaml，以更改REST端口号（默认为8081）。 3. ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值