大数据
文章平均质量分 90
大数据相关
进朱者赤
阿里非典型程序员一枚:微信公众号同名,记录平平无奇程序员在大厂的打怪升级之路。
Java、大数据、数据结构算法
展开
-
Apache Flink 如何保证 Exactly-Once 语义
Apache Flink 通过状态一致性检查点和 Two-Phase Commit 协议来确保 Exactly-Once 语义。这些机制确保了数据在分布式系统中的一致性和准确性,从而提高了大数据处理的可靠性和准确性。在实际应用中,我们可以根据具体需求配置 Flink 的检查点策略和外部存储系统的写入策略,以实现更好的性能和可靠性。原创 2024-06-12 11:38:18 · 836 阅读 · 2 评论 -
那些常忘的ODPS函数用法
前言经常用不会忘记的,我这就不再赘述了函数名函数功能函数定义返回str1中有多少个字符出现在str2中CHR将给定ASCII码ascii转换成字符CONCAT连接字符串KEYVALUE返回key-value对中key所对应的value字符串替换SPLIT_PART根据分隔符拆分字符串SUBSTR返回字符串指定位置指定长度的的子串。字符串替换。原创 2023-12-11 09:37:13 · 1686 阅读 · 0 评论 -
Flink常见面试问题(附答案)
Apache Flink是一个开源的流处理和批处理框架,可以实现快速、可靠、可扩展的大数据处理。窗口是Flink中用于对无限数据流进行有界处理的机制。它将无限流切分为有限的、不重叠的块,并对每个窗口进行计算。。原创 2024-04-07 12:55:17 · 3529 阅读 · 7 评论