Debezium系列之：开发代码支持时间戳转换成指定时间格式

已于 2022-12-28 19:45:10 修改
阅读量1k 收藏 1
点赞数 1
分类专栏： debezium 文章标签： Debezium系列 开发代码 支持时间戳转换成指定时间格式
于 2022-12-28 18:15:24 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhengzaifeidelushang/article/details/128472127
版权
debezium 专栏收录该内容
333 篇文章 307 订阅 ¥99.90 ¥299.90
订阅专栏
本文介绍了如何在使用Debezium时，将捕获到的时间戳字段转换为指定的日期时间格式，如'yyyy-MM-dd HH:mm:ss'。通过提供完整的源码、测试代码和配置步骤，详细讲解了从编译jar包到在Kafka Connect中应用的过程，以及在实际案例中验证转换效果。
摘要由CSDN通过智能技术生成

Debezium系列之：开发代码支持时间戳转换成指定时间格式

一、需求背景

  `create_time` datetime DEFAULT CURRENT_TIMESTAMP COMMENT '创建时间',
  • create_tim字段的时间，debezium会捕获成时间戳
  • 现在需要把时间戳转换为指定的时间格式，例如yyyy-MM-dd HH:mm:ss

二、完整源码

import
了解本专栏 订阅专栏 解锁全文
快乐骑行^_^
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
订阅专栏
Debezium系列之：开发插件解决timestamp字段时区问题和统一时间字段为指定的时间格式
zhengzaifeidelushang的博客
12-28 918
Debezium系列之：开发插件解决timestamp字段时区问题和统一时间字段为指定的时间格式
Debezium系列之：处理Timestamp类型、BigDecimal类型、带时域的时间
zhengzaifeidelushang的博客
01-29 518
Debezium系列之：处理Timestamp类型、BigDecimal类型、带时域的时间
debezium-datetime-converter:Debezium自定义转换器用于处理mysql datetime类型的问题
03-15
debezium-datetime-converter Debezium自定义转换器用于处理mysql datetime类型的问题 MySQL的 Binlog连接器 德比兹 德比兹图式 日期（2021-01-28） 本地日期（2021-01-28） 整数（18655） 碘化氢时间日期 时间（17:29:04） 期间（PT17H29M4S） 长（62944000000） （（持续时间）数据）.toNanos（）/ 1_000 时间戳记（2021-01-28 17:29:04） ZonedDateTime （2021-01-28T09：29：04Z） 细绳（2021-01-28T09：29：04Z） io.debezium.ZoneedTimestamp 约会时间（2021-01-28 17:29:04） LocalDateTime （2021-01-28T17：29
Flink CDC / Kafka Connect 自动转换 Debezium 的 DataTime / Timpstamp 时间格式
Laurence的技术博客
04-26 663
不管是用 Flink CDC 还是 Kafka Connect (Debezium Connector)，在实时获取数据库的 CDC 数据并以 Json 格式写入 Kafak 中时，都会遇到 DataTime / Timpstamp 类型的转换问题，即：原始数据库中的 DataTime / Timpstamp 的字面量是 2021-12-14 00:00:00 这种形式，但是，转换为 Json 后就变成了 1639411200000 (带毫秒位的 epoch 时间)，这带来的问题是：下游表基于 Json 数
kafka-connect mysql debeziem时区问题，时间格式化，时间转换
weixin_40747900的博客
03-04 3598
使用功能debeziem的kafka-connect-mysql进行抽取数据时，对于时间字段 date,dateTIme，默认是将字段的值转成时间戳。这样某些情况可能不符合需求。 可以使用TimestampConverter进行时间格式转换。 "transforms.tsFormat1.type": "org.apache.kafka.connect.transforms.TimestampConverter$Value", "transforms.tsFormat1.target.type": "
debezium抽取mysql timestamp和datetime类型值是“0000-00-00 00:00:00”
yiqian1989的博客
12-01 1031
debezium迁移mysql “0000-00-00 00:00:00”值如何处理的
Flink SQL系列之：解析Debezium数据格式时间字段常用的函数
zhengzaifeidelushang的博客
04-03 509
例如，DATE_FORMAT(TO_TIMESTAMP(‘2022-01-01 00:00:00’, ‘yyyy-MM-dd HH:mm:ss’), ‘yyyy/MM/dd HH:mm:ss’)将生成一个格式为’2022/01/01 00:00:00’的日期时间字符串。假设plan_date为1640966400，即2022-01-01 00:00:00的Unix时间戳，经过FROM_UNIXTIME、DATE_FORMAT和TO_DATE函数的转换，输出结果为：‘2022-01-01’（日期类型）。
Debezium系列之：Debezium采集Mysql数据库，数据库时间字段值的变化
zhengzaifeidelushang的博客
09-22 289
Debezium系列之：Debezium采集Mysql数据库，数据库时间字段值的变化
Debezium日常分享系列之：Debezium2.7版本PostgreSQL数据库连接器
最新发布
zhengzaifeidelushang的博客
07-18 668
PostgreSQL 的逻辑解码功能是在 9.4 版本中引入的。它是一种机制，允许提取提交到事务日志的更改，并借助输出插件以用户友好的方式处理这些更改。输出插件使客户端能够使用更改。逻辑解码输出插件。您可能需要安装您选择使用的输出插件。在运行 PostgreSQL 服务器之前，您必须配置使用所选输出插件的复制槽。该插件可以是以下之一：Decoderbufs 基于 Protobuf，由 Debezium 社区维护。pgoutput 是 PostgreSQL 10+ 中的标准逻辑解码输出插件。
Debezium系列之：详细介绍实现时间字段时区转换的方式
zhengzaifeidelushang的博客
11-25 418
Debezium系列之：详细介绍实现时间字段时区转换的方式
Debezium日常分享系列之：Debezium采集时间序列数据库TimescaleDB
zhengzaifeidelushang的博客
10-16 719
Debezium日常分享系列之：Debezium采集时间序列数据库TimescaleDB
使用kafka connect结合debezium的方式采集oracle数据，日期类型时区问题处理
雾岛与鲸的博客
04-26 4649
环境配置: 1、kafka 2.8.0 2、debezium 1.9.0 3、oracle 11g 使用kafka connect结合debezium的方式采集oracle数据, 参考我的上篇文章 https://blog.csdn.net/qq_36039236/article/details/124236918?spm=1001.2014.3001.5501 本篇主要解决使用 debezium 采集数据过程中，日期类型的数据比正常时间多8个小时的问题，废话少说，直接上干货。 我的解决办法是直接调整 de
一文搞懂 MySQL、debezium 和 ElasticSearch 的时间格式
爱丹丹的博客
09-19 511
最近在使用 FlinkCDC 做 MySQL 到 ElasticSearch 的数据同步，在数据同步的过程中遇到了一些关于日期类型的问题，在这里整理总结一下。
Debezium同步之Debezium日志记录
Auspicious航的博客
07-11 838
目录 前言 日志记录概念记录器日志级别附加器 了解默认日志记录配置 配置日志记录通过配置记录器设置日志记录级别使用 Kafka Connect REST API 动态设置日志记录级别 使用映射的诊断上下文设置日志记录级别 在Debezium 容器镜像中配置日志级别Debezium 在其连接器中内置了广泛的日志记录，您可以更改日志记录配置以控制这些日志语句中的哪些出现在日志中以及这些日志的发送位置。Debezium（以及 Kafka、Kafka Connect 和 Zookeeper）使用
Debezium系列之：源码阅读之Converters
zhengzaifeidelushang的博客
04-27 1187
Debezium系列之：源码阅读之Converters一、Debezium专栏博客每周更新计划二、pom.xml三、转换器CustomConverter四、自定义转化器IsbConverter五、自定义转换器使用方式六、Schema七、Field八、SchemaBuilder九、ConvertedField十、RelationalColumn 后续每周在日常更新Debezium技术文章的同时，会以一定频率同步更新Debezium源码阅读系列文章，欢迎与博主交流Debezium相关技术，一起加油。 一、Deb
Debezium实战-第5章 转换
Kettle实战
04-29 2128
5 转换 5.1 概览 可以使用转换配置连接器，以使每个消息修改轻量级。Debezium 提供了几个单消息转换(SMT)，您可以使用它们在将记录发送到 Apache Kafka（通过将它们应用到 Debezium 连接器）之前修改记录，或者在接收器连接器从 Kafka 读取它们时修改它们。Debezium Server也支持使用 SMT。 Debezium 提供以下 SMT： 转换 描述 主题路由 根据应用于原始主题名称的正则表达式将记录重新路由到不同的主题。 基于内容的路由 根据活动内
debezium 最佳参数实践v1
一名数据库爱好者的专栏
07-24 241
【代码】debezium 最佳参数实践。
Debezium系列之：Debezium2.X之Debezium JDBC连接器
zhengzaifeidelushang的博客
05-03 1799
Debezium系列之：Debezium2.X之Debezium JDBC连接器
PHP处理日期时间：UNIX时间戳与时间戳转换
- `date()`函数是将时间戳按照指定的格式转换为日期和时间字符串的关键工具。例如，`date('Y-m-d H:i:s', 1236248670)`会返回'2009-03-05 10:24:30'。`date()`函数的`$format`参数可以接受多种格式代码，如'd'表示...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

快乐骑行^_^

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值