![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
业务
小妖别跑
这个作者很懒,什么都没留下…
展开
-
递归拼复合维度key
场景:当复合维度进行分析是,为了保证查询的速度,此时就要对维度进行拼接 三个维度 来源维度 设备维度 地域维度 全部来源 全部设备 全部地域 全部来源 具体设备 全部地域 具体来源 全部设备 全部地域 具体来源 具体设备 全部地域 全部来源 全部设备 具体地域 全部来源 具体设备 具体地域 具体来源 全部设备 具体地域 具体来源 具体设备 具体地域 ...原创 2018-11-18 22:47:41 · 242 阅读 · 0 评论 -
hive-udf-kafka批量数据导入kafka
背景:数据存在hive中,现在需要将数据导入kafka中,为了减少中间环节,使用自定义UDF将hive数据导入到kafka中 问题:UDF时对一行的处理,批量导入就会涉及多行的问题,怎么将多行数据放到一个udf中? 解决思路:用collect_list函数将多行转成集合,在udf中循环遍历,发送到kafka 代码 package cn.kobold; import org.apache...原创 2019-01-14 11:06:20 · 2366 阅读 · 0 评论