第二篇：本地环境搭建&构建第一个Flink应用

最新推荐文章于 2021-11-27 19:30:45 发布
最新推荐文章于 2021-11-27 19:30:45 发布
阅读量1k 收藏 2
点赞数
分类专栏： Flink高级进阶和企业级应用 Flink系统性学习专栏
原创文章禁止转载。否则追究法律后果。
本文链接：https://blog.csdn.net/u013411339/article/details/87909888
版权
本文介绍了如何在本地环境中搭建单机版本的Flink，包括环境要求、安装方法、启动Flink，以及使用Flink Maven Archetype构建应用，通过编写WordCount示例详细阐述了开发流程。最后，展示了程序的运行与提交。
摘要由CSDN通过智能技术生成

本地安装单机版本Flink

一般来说，线上都是集群模式，那么单机模式方便我们测试和学习。

环境要求

本地机器上需要有 Java 8 和 maven 环境，推荐在linux或者mac上开发Flink应用：

如果有 Java 8 环境，运行下面的命令会输出如下版本信息：

如果有 maven 环境，运行下面的命令会输出如下版本信息：


开发工具推荐使用 ItelliJ IDEA。

第一种方式

来这里https://flink.apache.org/

看这里：

了解本专栏 订阅专栏 解锁全文 超级会员免费看
王知无(import_bigdata)
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
订阅专栏
构建Flink第一个应用程序
SmartSi
07-31 212
在本示例中，我们的目的是每统计每个单词在特定时间窗口中出现的次数，比如说5秒一个窗口。我们首先要将字符串数据解析成单词和次数（使用Tuple2表示），第一个字段是单词，第二个字段是次数，次数初始值都设置成了1。然后我们可以在流上指定想要的窗口，并根据窗口中的数据计算结果。在这我们使用的是Mac系统。聚合函数，相同单词的出现次数相加，最终得到一个结果数据流，每5秒内的每个单词出现的次数。在搭建好我们的依赖环境之后，最重要的是搭建我们的Flink集群，具体可以参考。...
Flink从入门到放弃(入门篇2)-本地环境搭建&构建第一个Flink应用.md
04-27
Flink从入门到放弃(入门篇2)-本地环境搭建&构建第一个Flink应用.md
Flink从入门到放弃(入门篇2)-本地环境搭建&构建第一个Flink应用
weixin_34250434的博客
02-24 192
本地安装单机版本Flink 一般来说，线上都是集群模式，那么单机模式方便我们测试和学习。 环境要求 本地机器上需要有 Java 8 和 maven 环境，推荐在linux或者mac上开发Flink应用： 如果有 Java 8 环境，运行下面的命令会输出如下版本信息： 如果有 maven 环境，运行下面的命令会输出如下版本信息： 开发工具推荐使用 ItelliJ IDEA。 插播广告 全网唯...
brew更新的时候不更新某个应用_Flink从入门到放弃(入门篇2)-本地环境搭建&构建第一个Flink应用
weixin_39959126的博客
11-28 59
本地安装单机版本Flink 一般来说，线上都是集群模式，那么单机模式方便我们测试和学习。 环境要求 本地机器上需要有 Java 8 和 maven 环境，推荐在linux或者mac上开发Flink应用： 如果有 Java 8 环境，运行下面的命令会输出如下版本信息： 如果有 maven 环境，运行下面的命令会输出如下版本信息： 开发工具推荐使用 ItelliJ IDEA。 插播广告 全网唯一一个从...
二、Flink从入门到放弃-本地环境搭建&构建第一个Flink应用
嘻哈吼嘿呵的博客
09-13 152
https://www.jianshu.com/p/88e175355d7e
flink环境搭建
小程序猿
11-16 1725
Apache Flink是一个开源大数据框架和分布式处理引擎，用于在无边界（有定义流的开始，但没有定义流的结束）和有边界（有定义流的开始，也有定义流的结束）数据流上进行有状态的计算。Flink 能在所有常见集群环境中运行，并能以内存速度和任意规模进行计算。 1.flink依赖jdk和scala（安装省略） jdk环境变量配置：vim /etc/profile export JAVA_HOME=/home/hadoop/jdk8 export PATH=$JAVA_HOME/bin:$PATH export
三、Flink入门--环境搭建部署
大数据之路
05-18 2946
1.环境搭建概述 Flink在日常工作时一般使用2种部署方式，stand-alone模式或者是on yarn 模式，stand-alone模式的话部署比较简单，on-yarn模式需要部署hadoop集群。我们可以看下flink的架构图如下： jobmanager 负责任务调度,checkpoint taskmanager 负责任务的执行 client 负责任务的提交 2.stand-alon...
Flink第一章：开发环境搭建和应用的配置、部署及运行
马斯特杨的博客
04-28 985
一、Flink 开发环境部署和配置 Flink 是一个以 Java 及 Scala 作为开发语言的开源大数据项目，代码开源在 GitHub 上，并使用 Maven 来编译和构建项目。 Java、Maven 和 Git 这三个工具是必不可少的，另外一个强大的 IDE 有助于我们更快的阅读代码、开发新功能以及修复 Bug。 环境：centos7.6，maven 3.6.1,flink1.10 安装...
Flink入门案例程序（中华石杉的课堂代码）
04-12
Flink入门案例程序（中华石杉的课堂代码）代码分功能打包，清晰简单易懂，适合对flink有些功能函数不熟悉的人群
FlinkCDC第二部分-搭建Flink单机服务，ctrl就完事~
最新发布
07-05
在本教程中，我们将深入探讨如何搭建Apache Flink的单机服务环境，这对于初学者以及想要在本地进行开发和测试的IT专业人士来说是至关重要的。Apache Flink是一个开源的流处理框架，它提供了低延迟、高吞吐量的数据...
Flink从入门到放弃(入门篇3)-DataSetAPI
weixin_34252686的博客
02-25 537
首先我们来看一下编程结构： 编程结构 public class SocketTextStreamWordCount { public static void main(String[] args) throws Exception { if (args.length != 2){ System.err.println("USAGE:\nSocketTextStreamWordCount &...
Flink从入门到放弃-大纲
weixin_34306593的博客
02-24 606
入门篇大纲 放弃篇大纲 删库跑路篇 一些demo和项目代码，托管在这里 广告时间 全网唯一一个从0开始帮助Java开发者转做大数据领域的公众号~ 公众号大数据技术与架构或者搜索import_bigdata关注，大数据学习路线最新更新，已经有很多小伙伴加入了~ ...
Flink：从入门到放弃
程序园@大Null
05-19 2232
文章目录前言一、Flink简介1. Flink组件栈2. Flink基石 前言 待补充 一、Flink简介 Apache Flink 是一个框架和分布式处理引擎，用于对无界和有界数据流进行状态计算。 1. Flink组件栈 每一层所包含的组件都提供了特定的抽象，用来服务于上层组件： 物理部署层： Flink 支持本地运行、能在独立集群或者在被 YARN 管理的集群上运行， 也能部署在云上，该层主要涉及Flink的部署模式，目前Flink支持多种部署模式：本地、集群(Standalone、YARN)、云(G
flink入门_Flink从入门到放弃-入门篇
weixin_39815925的博客
11-30 167
大数据成神之路：点我去成神之路系列目录^_^Java高级特性增强-集合Java高级特性增强-多线程Java高级特性增强-SynchronizedJava高级特性增强-volatileJava高级特性增强-并发集合框架Java高级特性增强-分布式Java高级特性增强-ZookeeperJava高级特性增强-JVMJava高级特性增强-NIO...已经更新80+篇~导语大数据Java基础入门篇从昨天起...
Flink 应用篇
sky
07-31 3095
Apache Flink是一个用于对无界和有界数据流进行有状态计算的框架。Flink在不同的抽象级别提供多个API，并为常见用例提供专用库。 流媒体应用程序的构建块 可以由流处理框架构建和执行应用程序类型由框架控制流,状态和时间的程度来定义. 流 流是流处理的基本方面.Flink可以处理任何类型的流 有界和无界流:流可以有界或者无界,及固定大小写的数据集,Flink具有处理无界流的复...
flink入门到精通
laogong的博客
01-28 1326
1、lambada架构需要同时搭建批处理（保证数据准确）和流处理（低延迟）两套架构。而flink结合spark-streaming（高吞吐，数据准确性）和storm（低延迟）的优点，这样相当于一套架构实现了lambada架构。 ...
【大数据】Flink从入门到精通
后端研发工程师Marion的博客
11-27 727
一、参考资料 1. 视频教学 042.尚硅谷_Flink-Watermark概念
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

王知无(import_bigdata)

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值