Flink重点知识整理05

最新推荐文章于 2024-07-14 23:06:10 发布

司南要平衡

最新推荐文章于 2024-07-14 23:06:10 发布

阅读量76

点赞数 1

文章标签： flink kafka 分布式大数据 java

版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文链接：https://blog.csdn.net/m0_68263849/article/details/130793254

版权

41.四种数据交换策略：向前传播、按Key分组、广播、随机

42.Flink的核心组件——JobManager、ResourceManager、TaskManager、Dispacher

43.Dispacher接收多个作业，进行数据的分发

44.TaskManager是真正执行计算任务的节点ResourceManager管理T资源还要协调J资源

45.有了EventTime时间戳，我们还必须生成Watermark，Watermark是Flink插入到数据流中的一种特殊的数据结构，它包含一个时间戳，并假设后续不会有小于该时间戳的数据

46.Flink的组件栈分为4层：部署层、运行时层、API层和上层工具

47.算子链：将相近的算子子任务链接在一起，链接后以任务的形式被TaskManager调度执行，可以降低算子子任务之间的传输开销

48.Flink允许开发者手动配置是否启用算子链

49.实际应用中一般根据输入数量的大小、计算资源的多少等多方面因素来设置并行度

50.在操作系统层面，进程是进行资源分配和调度的一个独立单位，线程是CPU调度的基本单位

司南要平衡

关注

1
点赞
踩
0

收藏

觉得还不错? 一键收藏
1
评论
Flink重点知识整理05

45.有了EventTime时间戳，我们还必须生成Watermark，Watermark是Flink插入到数据流中的一种特殊的数据结构，它包含一个时间戳，并假设后续不会有小于该时间戳的数据。47.算子链：将相近的算子子任务链接在一起，链接后以任务的形式被TaskManager调度执行，可以降低算子子任务之间的传输开销。50.在操作系统层面，进程是进行资源分配和调度的一个独立单位，线程是CPU调度的基本单位。46.Flink的组件栈分为4层：部署层、运行时层、API层和上层工具。
复制链接

扫一扫

司南要平衡 CSDN认证博客专家 CSDN认证企业博客

码龄2年

7: 原创

170万+: 周排名

202万+: 总排名

1085: 访问

: 等级

77: 积分

1: 粉丝

7: 获赞

6: 评论

0: 收藏

私信

关注

热门文章

最新评论

Flink重点知识整理06
CSDN-Ada助手: 非常感谢您的不断创作，第6篇博客“Flink重点知识整理06”内容丰富，对于学习Flink的人来说非常有用。希望您能继续保持这种创作热情，为读者们带来更多优质的内容。下一步的创作建议，可以考虑深入探讨Flink的实际应用场景，或者与其他技术进行结合使用，以拓宽读者们的视野。再次感谢您的分享，期待您更多的精彩文章。 CSDN 会根据你创作的博客的质量，给予优秀的博主博客红包奖励。请关注 https://bbs.csdn.net/forums/csdnnews?typeId=116148&utm_source=csdn_ai_ada_blog_reply6 看奖励名单。
Flink重点知识整理07
CSDN-Ada助手: 非常感谢您的辛勤付出，第7篇博客的内容对于学习Flink的人来说一定是非常有用的。我相信您的整理能够帮助更多的人更快地掌握Flink的关键知识。希望您能够继续坚持创作，不断提高自己的写作水平，并分享更多有价值的知识给大家。期待您的下一篇作品！ CSDN 会根据你创作的博客的质量，给予优秀的博主博客红包奖励。请关注 https://bbs.csdn.net/forums/csdnnews?typeId=116148&utm_source=csdn_ai_ada_blog_reply7 看奖励名单。
Flink重点知识整理05
CSDN-Ada助手: 非常感谢用户分享的第5篇博客，标题为“Flink重点知识整理05”。您的博客内容非常有深度和价值，对于我们学习Flink的人来说是非常有帮助的。恭喜您能够持续创作，为社区贡献了宝贵的知识和经验。接下来，我想建议您在下一步的创作中，可以更多地分享实际应用场景和案例，让读者更好地理解Flink的实际应用。再次感谢您的分享，期待您更多的精彩博客！如何快速涨粉，请看该博主的分享：https://hope-wisdom.blog.csdn.net/article/details/130544967?utm_source=csdn_ai_ada_blog_reply5
Flink重点知识整理02
CSDN-Ada助手: 非常感谢您分享关于Flink的重点知识整理，希望您能够持续创作并分享。除了您提到的知识点，还有一些扩展知识和技能，比如： 1. Flink的窗口类型除了会话窗口还包括滑动窗口和滚动窗口，可以根据业务需要进行选择。 2. Flink在处理数据时，可以使用水位线（Watermark）来处理乱序数据，保证数据的准确性。 3. Flink提供了丰富的API和库，可以用于流数据的处理、分析和可视化，例如Flink SQL、Flink CEP等等。希望这些信息可以对您的学习和实践有所帮助，也期待您继续分享更多有价值的内容。如何写出更高质量的博客，请看该博主的分享：https://blog.csdn.net/lmy_520/article/details/128686434?utm_source=csdn_ai_ada_blog_reply2
Flink重点知识整理03
CSDN-Ada助手: 恭喜您又写了一篇非常精彩的博客！作为读者，我非常感谢您对Flink这一重要知识点的整理和分享。不过，作为一篇重点知识整理的博客，我认为您可以在下一篇中更关注一些实战案例和经验分享，让读者更深入地理解和应用Flink。期待您的下一篇作品！ CSDN 正在通过评论红包奖励优秀博客，请看红包流：https://bbs.csdn.net/?type=4&header=0&utm_source=csdn_ai_ada_blog_reply3，我们会奖励持续创作和学习的博主，请看：https://bbs.csdn.net/forums/csdnnews?typeId=116148&utm_source=csdn_ai_ada_blog_reply3

大家在看

最新文章

目录

评论 1

被折叠的条评论为什么被折叠?

到【灌水乐园】发言

查看更多评论

添加红包

成就一亿技术人!

hope_wisdom

发出的红包

实付元

使用余额支付

点击重新获取

扫码支付

钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。