Flink基础学习(二)

开发流程

1、获取execution environment

StreamExecutionEnvironment是所有流式flink程序的基础
在这里插入图片描述

  • getExecutionEnvironment() 推荐
  • createLocalEnvironment()
  • createRemoteEnvironment(host:string, port: int, jarFiles: string)

2、加载/创建初始化数据

  • 基于文件
    readTextFile(path)
    readFile(fileInputFormat, path)
    readFile(fileInputFormat, path, watchType, interval, pathFilter)
  • 基于套接字
    socketTextStream
  • 基于集合
    fromCollection(Seq)
    fromCollection(Iterator)
    fromElements(elements:_*)
    fromParallelCollection(SplittableIterator)
    generateSequence(from, to)
  • 自定义数据源
    实现SourceFunction
    实现ParallelSourceFunction
    继承RichParallelSourceFunction

3、数据转换(各类算子)
在这里插入图片描述
4、指定放置计算结果的位置
在这里插入图片描述
5、触发程序执行
excute()

6、运行

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值