- 博客(2)
- 资源 (12)
- 收藏
- 关注
原创 Flink双流connect的独特使用方式
业务需求:可动态更新本地内存缓存信息 因有一些配置信息原来是存在redis中的,但是发现flink集群与redis集群网络有较大延迟,这样导致flink处理速度上不去,有消费挤压与连接报错等问题。 解决方案:通过双流connect连接两个kafka信息,一个做主数据流处理,一个做缓存信息更新处理,通过processBroadcastElement的广播特性,将redis信息更新至内存中,实现快速访问。 代码: //初始化主 kafka消费者 FlinkKafkaConsumer myConsume
2022-03-07 12:37:15 2225 1
原创 大数据在实时因子中的应用
在生活中每个人都会存在N个标签,比如性别、年龄、喜欢吃什么、喜欢做什么等等的标签分类,这种我们可以叫做他为因子,又何为实时因子呢?,就是在你主体不断的变化下,其因子的属性值也在不断的更新,这种就叫做实时因子,通过大数据分析的方式 来确定因子分类,通过可配置的方式实现因子的配置,得出不同的因子值,我们组合在一起就可以称作客户群或者策略的用户群,通过这样的用户群,我们就可以做一些营销策...
2020-02-29 19:07:52 255
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人