大数据优就业——第四阶段(Flink生态系统体系架构)
文章平均质量分 95
Flink生态系统体系架构
dogedong
这个作者很懒,什么都没留下…
展开
-
Flink阶段总结
Flink总结TaskManager和SlotsTask Slot 是静态的概念,是指 TaskManager 具有的并发执行能力,可以通过 参数 taskmanager.numberOfTaskSlots 进行配置,而并行度 parallelism 是动态概念, 即 TaskManager 运行程序时实际使用的并发能力,可以通过参数 parallelism.default 进行配置。DataflowFlink 程序由 Source、Transforma...原创 2021-11-19 17:18:46 · 1115 阅读 · 0 评论 -
Day82_ELK(一)
ElasticSearch1、搜索的介绍搜索是指搜寻检索,指代使用一定手段来检索到我们自己需要的信息,包括从文件当中检索,百度当中检索,网站内部搜索等等2、全文检索的介绍1、全文检索的需求介绍首先我们谈几个公司,如雷贯耳的:百度、谷歌、维基百科;这些公司都有一个相似性就是门户网站,可以提供我们通过关键字搜索,然后快速的检索出我们想要的信息;【网页百度展示】比如我们检索优就业,百度后台就会按照这个关键字进行查找(里面有搜索库,以及爬虫库),然后按照权重来进行从上到下的排序,给我们高原创 2021-11-11 21:01:57 · 336 阅读 · 0 评论 -
Day79_Flink(五) FlinkSQL和CEP
课程大纲 课程内容 学习效果 掌握目标 FlinkSQL FlinkTable 掌握 FlinkSQL 掌握 FlinkCEP FlinkCEP 掌握 任务性能优化 ...原创 2021-11-08 21:54:53 · 2460 阅读 · 1 评论 -
Day78_Flink(四)Flink状态操作
课程大纲 课程内容 学习效果 掌握目标 ProcessFunction ProcessFunction 掌握 状态编程 状态编程 掌握 容错机制 容错机制 掌握 ...原创 2021-11-07 23:23:28 · 1436 阅读 · 0 评论 -
Day77_Flink(三)Flink时间语义和水印
课程大纲 课程内容 学习效果 掌握目标 时间语义 EventTime 掌握 IngestionTime 掌握 ProcessingTime 掌握 水印 水印 ...原创 2021-11-04 22:52:18 · 370 阅读 · 0 评论 -
Day76_Flink(二)Flink算子操作
课程大纲 课程内容 学习效果 掌握目标 DataSet/Stream Dataset/stream 掌握 Window操作 Window 掌握 DataSet/Stream APIFlink处理主要是分为流处理和批量处理。流处...原创 2021-11-02 23:25:42 · 729 阅读 · 0 评论 -
Day74~75_Flink(一)Flink基础核心知识
第一讲 Flink基础核心知识 课程大纲 课程内容 学习效果 掌握目标 Flink概述 Flink概述 了解 Flink开发环境 Flink开发环境 掌握 Flink入门实战 Flink入门实战 ..原创 2021-11-02 20:55:52 · 1011 阅读 · 0 评论