flink写入 mysql_flink sql实时计算当天pv写入mysql

本文介绍了如何使用Flink SQL实现实时计算网站的每日PV值,并将结果实时写入到MySQL数据库中。通过示例代码展示了如何设置数据源、定义MySQL UPSERTSink,并利用Flink的Group By操作处理流数据,确保MySQL表中每天只有一条记录,不断更新PV字段。
摘要由CSDN通过智能技术生成

cb6ff85e5c8e33d72ebea0f48c540e67.png

今天我们主要来讲一个很简单但是很常见的需求,实时计算出网站当天的pv值,然后将结果实时更新到mysql数据库,以供前端查询显示。

接下来我们看看如何用flink sql来实现这个简单的功能。

首先我们还是使用datagen生成测试数据,随机生成一些用户id

String sourceSql = "CREATE TABLE datagen (n" +
                " userid int,n" +
                " proctime as PROCTIME()n" +
                ") WITH (n" +
                " 'connector' = 'datagen',n" +
                " 'rows-per-second'='100',n" +
                " 'fields.userid.kind'='random',n" +
                " 'fields.userid.min'='1',n" +
                " 'fields.userid.ma
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值