flink if函数false时对字符串做阶段的bug

最新推荐文章于 2024-04-26 14:36:50 发布
最新推荐文章于 2024-04-26 14:36:50 发布
阅读量575 收藏 7
点赞数 8
分类专栏： 源码探索 文章标签： flink bug 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43283487/article/details/135732214
版权

背景

flink官网对if函数就是我们正常的理解
在这里插入图片描述
我们之前在使用flink1.12时候也没有发现问题，但是最近一个1.15的任务出现了一个bug
本来应该返回cdefg，但是返回了cde

 if(false,'abc','cdefg')  --返回cde

我们找了一下这个函数，发现代码确实是这样理解的，但是和官网描述明显不一致

最终在flink issues找到了这个bug，在这个issues里对代码做了修复
https://issues.apache.org/jira/browse/FLINK-30559

合并这个issues，问题解决

orange大数据技术探索者
关注
  • 8
    点赞
  • 踩
  • 7
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
【FlinkSql篇05】FlinkSql之函数1
08-04
比较函数逻辑函数算术函数字符串函数时间函数聚合函数用户定义函数（User-defined Functions，UDF）是一个重要的特性，因为它们显著地扩展了查询
【Flink篇04】Flink运行时架构1
08-04
【Flink篇04】Flink运行时架构1
bdp-string-sim:大数据Praktikum的Flink项目的字符串相似性@ UNI Leipzig，SS2016
05-11
bdp-string-sim 大数据Praktikum的Flink项目的字符串相似性@ UNI Leipzig，SS2016 运行语法 预设程序 必填参数： --process default --inputCsv path/to/concept_attribute.csv 描述：导入concept_attribute.csv，仅过滤标签属性，映射id和值并将其打印出来 创建比较CSV 必填参数： --process createCompareCsv --inputCsv path/to/concept_attribute.csv --outputCsv path/to/output.csv --removeBrackets [true|false] 描述： 导入concept_attribute.csv 仅过滤名称为“ label”的属性 映射ID和值，例如{1，
说几个flink好做spark却不好做的场景
01-07
经常有粉丝问我该选flink和spark streaming？ 业务选型对新手来说是件非常困难的事情，对于经验丰富又经常思考的人来说就很简单。 选型的时候个人准备知识： 1.深入了解框架。 2.深入了解框架的周边生态。 3.深入了解你自己的业务场景。 就拿flink和spark streaming来说吧，要是理解其设计灵感就会很简单的理解该选谁： spark 是做批处理起家，然后以微批的形式开创了流处理。使用场景很显而易见了，允许一点延迟，批量处理，吞吐量优先地，而且spark streaming贡献者这么多依然很稳定。 flink是以流处理起家，然后以流处理的灵感去创建批处理。那就很适合实时
flink内置函数
热门推荐
knowfarhhy
09-19 1万+
flink内置函数 flink支持的字符串函数： string1 || string2 : 两个字符串串联 CHAR_LENGTH(string) / CHARACTER_LENGTH(string) ：返回字符串字符长度 UPPER(string) ： 返回大写格式的字符串 LOWER(string) ： 返回小写格式的字符串 POSITION(string1 IN string2) ： 返回s...
官宣｜Apache Flink 1.17 发布公告
Ververica的博客
03-23 830
Apache Flink PMC（项目管理委员）已宣布发布 Apache Flink 1.17.0。Apache Flink 是领先的流处理标准，流批统一的数据处理概念在越来越多的公司中得到认可。
flink自定义函数-字符串BASE64解码，字符编码：HEX（16进制，不编码）
04-23
2. 对字符串进行BASE64解码，字符串内容是十六进制，字符不编码 3. flinksql进行调用 4. 自定义函数调用过程 4.1. 编译打包代码，生成的jar复制到flink安装目录下的lib目录。 例如：/flink/lib 4.2. flinksql脚本...
实现一个简单的HTTP请求的Flink UDF函数
04-24
1. flink自定义函数 2. 在flinksql中实现HTTP请求 3. 在flinksql中自定义函数调用过程 3.1. 编译打包代码，生成的jar复制到flink安装目录下的lib目录。 例如：/flink/lib 3.2. flinksql脚本注册自定义函数 CREATE ...
流式字符串统计的FlinkJob
12-31
流式字符串统计的FlinkJob小demo
2、Flink DataStreamAPI 概述（下）
猫猫爱吃小鱼粮
04-24 474
Flink DataStreamAPI 概述（下）
1、Flink DataStreamAPI 概述（上）
猫猫爱吃小鱼粮
04-24 652
1、Flink DataStreamAPI 概述（上）
5、Flink事件时间之Watermark详解
最新发布
猫猫爱吃小鱼粮
04-26 1134
Flink事件时间之Watermark详解
深入探索 Apache Flink：流式处理框架的奥秘
shiranyyds的博客
04-21 428
深入探索 Apache Flink：流式处理框架的奥秘
Flink面试（2）
weixin_51981189的博客
04-24 832
1) CheckpointCoordinator(检查点协调器) 周期性的向该流应用的所有source算子发送 barrier(屏障)。2) 当某个source算子收到一个barrier时，便暂停数据处理过程，然后将自己的当前状态制作成快照，并保存到指定的持久化存储中，最后向CheckpointCoordinator报告自己快照制作情况，同时向自身所有下游算子广播该barrier，恢复数据处理。
Flink Job提交分析
weixin_44852067的博客
04-22 887
1.概述   Flink 应用程序的提交方式为：打成jar包，通过 flink 命令来进行提交。 flink 命令脚本的底层是通过 java 命令启动：CliFrontend 类 来启动 JVM 进程，执行任务的构造和提交。 flink run xxx.jar class arg1 arg2 flink.sh 脚本: ## flink.sh target="$0" # For the case, the executable has been directly symlinked, figure out
Flink 作业管理器：核心功能、角色与责任详解
木南曌的博客
04-24 368
它负责作业的接收、解析、规划、调度、状态管理、容错处理以及与用户的交互，确保流处理作业在复杂的分布式环境中高效、可靠地运行。通过高可用部署和丰富的监控手段，作业管理器为用户提供了一个稳定、可控的流处理平台，适应各种规模和复杂度的实时数据处理场景。Apache Flink 中的作业管理器（JobManager），又称为 Master，是整个 Flink 集群的核心控制组件，负责对提交的流处理作业进行全局管理和协调。
Flink CDC详解
Aidon博客
04-24 1221
CDC 的全称是 Change Data Capture ，在广义的概念上，只要是能捕获数据变更的技术，我们都可以称之为 CDC。目前通常描述的 CDC 技术主要面向数据库的变更，是一种用于捕获数据库中数据变更的技术。Flink CDC本质是一组数据源连接器，使用更改数据捕获(CDC)从不同的数据库中摄取更改。Apache Flink®的CDC连接器集成了Debezium作为捕获数据更改的引擎，所以它可以充分利用Debezium的能力。
【bugfix】error in chunk.js from uglifyjs
daddykei的博客
04-24 552
检查是否是因为新安装的包不支持es5，通过babel 或者 fork 打包输出 es5以兼容老项目。
flinksql 字符串切分函数
05-18
在 Flink SQL 中，可以使用内置函数 `SPLIT` 来实现字符串切分。该函数的语法如下： ``` SPLIT(str, delimiter) ``` 其中，`str` 是要切分的字符串，`delimiter` 是分隔符。该函数会将字符串 `str` 按照分隔符 `delimiter` 进行切分，返回一个数组。 例如，假设有一个表 `user`，其中包含一个字段 `address`，需要将该字段按照逗号进行切分，可以使用如下的 Flink SQL 语句： ```sql SELECT SPLIT(address, ',') FROM user ``` 执行该语句后，会返回一个包含多个数组的表，每个数组表示一个切分后的字符串数组。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

orange大数据技术探索者

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值