Flink入门案例(Word Count)

最新推荐文章于 2022-08-15 17:10:43 发布
最新推荐文章于 2022-08-15 17:10:43 发布
阅读量323 收藏
点赞数
分类专栏： Flink 文章标签： flink
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/DataIntel_XiAn/article/details/100421849
版权
本文通过Flink 1.9.0演示了Word Count的实现过程，包括安装、启动本地监听模式、作业提交、数据发送及查看输出结果，帮助理解流式数据处理。
摘要由CSDN通过智能技术生成

Flink安装包下载【flink-1.9.0-bin-scala_2.11.tgz】

略

 

启动

[hadoop@hadoop flink-1.9.0]$ ./bin/start-cluster.sh
Starting cluster.
Starting standalonesession daemon on host hadoop.
Starting taskexecutor daemon on host hadoop.

 

启动本地监听模式端口9000

nc -l 9000

 

启动作业

./bin/flink run examples/streaming/SocketWindowWordCount.jar --port 9000

 

登录本机8081地址，可以看到已经提交了一个作业正在运行

 

本地监听模式发送数据

[hadoop@hadoop flink-1.9.0]$ nc -
最低0.47元/天 解锁文章
Mr.ChowSit
关注
专栏目录
Flink入门系列--和Springboot框架结合(1.14.3版本)
打酱油的葫芦娃
03-20 1万+
本文 Flink 版本为 1.14.3。 本文主要讲解如何将 Flink 和 Springboot 两大框架融合在一起， 可以对接 SpringCloud 生态系统，比如分布式配置中心、服务注册和发现、负载均衡等； 可以通过 Restful 接口的形式提交 Flink 任务。 本地工程构建 软件环境: Flink 1.14.3 Springboot 2.0.3.RELEASE JDK 11 <?xml version="1.0" encoding="UTF-8"?> <proj.
Flink从入门到精通100篇（十四）-Flink开发IDEA环境搭建与测试
wenyusuran的专栏
12-06 1168
一.IDEA开发环境 1.pom文件设置 <properties> <maven.compiler.source>1.8</maven.compiler.source> <maven.compiler.target>1.8</maven.compiler.target> ...
docker flink集群中运行socketWordcount项目
qq_43034505的博客
01-09 542
使用mvn构建项目 使用mvn命令，输入如下命令 mvn archetype:generate \ -DarchetypeGroupId=org.apache.flink \ -DarchetypeArtifactId=flink-quickstart-java \ -DarchetypeVersion=1.6.1 \ -DgroupId=my-flink-project \ -DartifactId=my-flink-project \ -Dversion=
Flink word count demo
qq_38374562的博客
11-06 282
如题。 工程目录 hello文本文件是给wordcount的批处理用的数据源，流处理的StreamWordCount的数据源为socket实时发送过来的数据源。 放代码 <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
Google python wordcount.py (python 2.7)
sxszwwzgy的博客
06-10 201
#!/usr/bin/python -tt The main() below is already defined and complete. It calls print_words() and print_top() functions which you write. 1. For the --count flag, implement a print_words(filena...
flink简单应用: scala编写wordcount
eyeofeagle的博客
03-11 5616
在ida中创建maven项目，配置scala环境，调用flink-streaming-scala的api 1,配置pom.xml &amp;amp;amp;amp;amp;amp;lt;dependency&amp;amp;amp;amp;amp;amp;gt; &amp;amp;amp;amp;amp;amp;lt;groupId&amp;amp;amp;amp;amp;amp;gt;org.apache.flink&amp;amp
Flink入门之WordCount（Scala语言）
Joker_Jiang3的博客
08-18 731
Flink入门之WordCount（Scala语言） 流式处理 一.创建一个Maven工程 1.pom.xml文件依赖 <dependencies> <dependency> <groupId>org.apache.flink</groupId> <artifactId>flink-scala_2.11</artifactId> <vers
从0到1Flink的成长之路-Table API& SQL入门案例
熊老二的博客
07-14 133
入门案例 依赖 依赖 <!-- Either... --> <dependency> <groupId>org.apache.flink</groupId> <artifactId>flink-table-api-java-bridge_2.11</artifactId> <version>1.10.0</version> <scope>provided</scope> </
Flink快速入门
baoxitong的博客
01-06 486
Apache Flink 概述 Flink 是构建在数据流之上的一款有状态的流计算框架，通常被人们称为第三代大数据分析方案 第一代大数据处理方案：基于Hadoop的MapReduce 静态批处理 | Storm 实时流计算 ，两套独立的计算引擎，难度大（2014年9月） 第二代大数据处理方案：Spark RDD 静态批处理、Spark Streaming（DStream）实时流计算（实时性差），统一的计算引擎，难度小（2014年2月） 第三代大数据分析方案：Apache Flink DataStrea
WordCount.jar
08-07
flink1.9版本自带的wordcount例子，位于flink-1.9.0\examples\streaming目录下
基于docker flink 的 SocketWordcount 运行
crhcyq的博客
01-12 410
Docker Flink初战：打包运行SocketWordCount项目（超详细） 文章目录Docker Flink初战：打包运行SocketWordCount项目（超详细）前言一、实验目的二、实验平台三、实验内容3.1 idea下创建maven项目3.2 修改pom文件3.3 创建类类BatchJob类SocketWindowWordCount：类StreamingJob3.4 打包3.5 上传到集群四、实验心得 前言 本篇文章手把手教你在idea打包flink项目并提交到docker下的flink集
Flink 入门wordcount
张俊杰 的博客
06-05 169
txt文档内容 hello world hello flink hello scala how are you fine thank you and you scala代码 import org.apache.flink.api.scala._ // 批处理 word count object WordCount { def main(args: Array[String]): Unit = { // 创建一个批处理的执行环境,这里是批处理环境,流处理环境和这个批处理环境不一样的.
Scala Flink之WordCount的两种处理案列
小狐白白的博客
07-04 532
Flink学习笔记之WordCount
Flink实例-Wordcount详细步骤
weixin_30292843的博客
08-09 354
link实例之Wordcount详细步骤 1.我的IDE是IntelliJ IDEA.在官网上https://www.jetbrains.com/idea/下载最新版2018.2的IDEA，如下图。破解可以再http://idea.lanyus.com/上获取破解码进行破解，如下图。 2.当IDE准备就绪后，开始创建一个项目名为bbb的maven项目，如下图。 ...
flink wordcount demo
H.king的博客
05-14 461
demo package com.hbn.wc import org.apache.flink.api.scala.{DataSet, ExecutionEnvironment} import org.apache.flink.api.scala._ object WordCount { def main(args: Array[String]): Unit = { //获取执行环境 val env = ExecutionEnvironment.getExecutionE.
Flink部署安装及其WorldCount执行
杨得朝的博客
11-09 2020
Flink启动及其WorldCount执行 大家好，是瓜哥，最近几年，大数据处理组件Flink非常火，作为一个从事多年java的老程序员，也得跟上时代的技步伐，不然迟早就会被这个技术千变万化的时代抛弃。 Flink 是一个针对流数据和批数据的分布式处理引擎，代码主要是由 Java 实现，部分代码是 Scala。它可以处理有界的批量数据集、也可以处理无界的实时数据集。对 Flink 而言，其所要处理的主要场景就是流数据，批数据只是流数据的一个极限特例而已，所以 Flink 也是一款真正的流批统一的计...
第二课 Flink 安装部署、环境配置及运行应用程序（1）
博客
08-15 2880
第二课
Flink实现WordCount
行人事，知天命
04-14 4281
import org.apache.flink.api.common.functions.FlatMapFunction; import org.apache.flink.api.java.DataSet; import org.apache.flink.api.java.ExecutionEnvironment; import org.apache.flink.api.java.tuple.Tup
flink 入门案例 依赖
最新发布
08-03
flink 入门案例主要依赖于以下几个方面： 1. Flink Core：Flink 是一个开源的流式处理框架，入门案例需要依赖 Flink 的核心库，包括 Flink 的运行时框架、状态管理等。 2. Apache Kafka：Kafka 是一个分布式的流...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值