功能背景
当前行业内普遍将 Kafka 作为实时提取和处理流数据的工具。同时,习惯将数据整理为 JSON 格式存入 Kafka 中。然而,如果将 Kafka 中的数据接入到数据库中,则需要自己手动编程实现。
因此,MatrixDB 4.4 管理平台对 Kafka 数据接入流程做了全面优化。支持自定义 Kafka 中 JSON / CSV 格式的数据和目标表字段之间的映射关系,借助 JSONPath 的方式将数据高效、灵活地接入到 MatrixDB;从而实现数据零代码、3分钟入库,让非专业人士玩转数据管道。
功能说明
流程概览
Kafka 数据接入到 MatrixDB 的基本步骤概括如下:
-
连接数据源
-
选择数据将要导入的目标表
-
配置源数据字段与目标表字段之间的映射
对应 MatrixDB 管理平台中具体的操作为:“连接”、“选择”、“解析”、“配置”、“映射”和“提交”6个步骤。
步骤说明
登入 MatrixDB 管理平台后,点击左侧导航栏中的“数据流”,进入数据流页面,点击“下一步”按钮开始数据接入流程。