Flink 本地环境 使用scala/Java 分别 编写Demo

这篇博客介绍了如何在Flink本地环境中使用Scala和Java编写WordCount Demo。首先,文章阐述了Flink作为分布式处理引擎的特点和适用场景。接着,详细展示了通过socket读取数据并进行WordCount操作的Scala和Java代码实现,并给出了执行结果。最后,文章提及了读取外部数据的不同方式,包括Text文档、CSV文档和Table的读取,提供了相应的代码示例及执行效果。
摘要由CSDN通过智能技术生成

Flink Demo

前言

Apache Flink是一个框架和分布式处理引擎,用于在无界和有界数据流上进行有状态计算。Flink设计用于在所有常见的集群环境中运行,以内存速度和任何规模执行计算。
有界:指数据流有开始,和结束
无界:指又开始,没结束
和spark的区别:spark
在这里插入图片描述

一. 准备
  • jar依赖
  <dependency>
            <groupId>org.apache.flink</groupId>
            <artifactId>flink-scala_2.11</artifactId>
            <version>1.6.2</version>
        </dependency>
      <!--  <dependency>
            <groupId>org.apache.flink</groupId>
            <artifactId>flink-streaming-java_2.11</artifactId>
            <version>1.6.2</version>
        </dependency>-->
        <dependency>
            <groupId>org.apache.flink</groupId>
            <artifactId>flink-streaming-scala_2.11</artifactId>
            <version>1.6.2</version>
        </dependency>
        <dependency>
            <groupId>org.apache.flink</groupId>
            <artifactId>flink-clients_2.11</artifactId>
            <version>1.6.2</version>
        </dependency>
二. socket 读取WC
scala实现socket WC
  • 代码
package com.imooc.spark.flink

import org.apache.flink.streaming.api.scala.StreamExecutionEnvironment
import org.apach
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值