blink接入kafka数据 sink到postgre中

blink是阿里的开源组件
可以接入的数据源, 和目标源可以
https://help.aliyun.com/knowledge_list/62516.html?spm=a2c4g.11186623.6.750.5f7e7c842qR66N

废话不多说直接上代码
登录阿里子账号
右键->新建作业
在这里插入图片描述
要在pg数据库中创建要sink的数据表


```sql
-- 注意这里五个参数不能变
CREATE TABLE kafka_demo(
  messageKey VARBINARY,
  `message`    VARBINARY,
  topic      VARCHAR,
  `partition`  INT,
  `offset`     BIGINT    
) with (

  type ='kafka011',
  topic = 'test',
  `group.id` = 'tesxtxxxx',
  bootstrap.servers = 'ip:9092'
);


CREATE VIEW input_view AS 
  SELECT CAST(`message` as VARCHAR ) as `message`
FROM kafka_demo;


-- ads sink.
CREATE TABLE adsSink (
    name VARCHAR(10),
    age VARCHAR(100),
    mess varchar(30)

) with (
  type='adbpg',
  url='jdbc:postgresql://xxx:5432/db',
  tableName='dbSink',
  userName='xxx',
  password='xxx'
);

INSERT INTO adsSink
SELECT 
  JSON_VALUE(`message`,'$.name'),
  JSON_VALUE(`message`,'$.age'),
  JSON_VALUE(`message`,'$.mess.grade')
from input_view;



这里就已经完成了

直接语法检测 上线就可以了

![在这里插入图片描述](https://img-blog.csdnimg.cn/20210317135202361.png)
上线成功之后可以看到
![在这里插入图片描述](https://img-blog.csdnimg.cn/20210317135247117.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3BvcGxhcmFuZHdpbGxvdw==,size_16,color_FFFFFF,t_70)

pg数据库中可以看到
![在这里插入图片描述](https://img-blog.csdnimg.cn/20210317135313288.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3BvcGxhcmFuZHdpbGxvdw==,size_16,color_FFFFFF,t_70)

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值