如何将SQL查出的结果拼成json串

本文介绍了如何使用SQL进行分组计算,然后利用concat、concat_ws、collect_set和collect_list等函数拼接成JSON串,用于创建复杂的特征值。详细解释了这些函数的功能和语法,并给出了完整的SQL代码示例。
摘要由CSDN通过智能技术生成

在机器学习中,特征工程是一个非常重要的环节,特征的好坏直接影响模型的效果。
除了用SQL开发一些简单的单值特征,比如每家店铺的流量,每家店铺的销量,这种单维的特征非常常见。
在实际工作中,还会有开发一些复杂特征的需求,常见的比如每家店铺在每个城市的广告投入,每家店在每个城市的产出,这里的投入产出指标会需要统计在店铺、城市两个维度下的值。

这种情况用怎么实现呢?

1. 用SQL拼出你想要的json串

  • 优点:借助SQL内置功能,查询速度快,效率高
  • 缺点:一次可能只能开发出一个特征值

2.用python或其他语言查询SQL结果

  • 优点:编程语言对于list,set,json操作灵活
  • 缺点:需要for循环,效率低

尤其是这些特征还要上调度,每天都要跑数据,在计算资源与时间的取舍后,优先选择通过SQL来实现。

实现步骤:

1.第一个group by 计算结果

在这里插入图片描述

2. 第二个group by拼接结果

需要掌握4个函数的用法:

  • concat()函数
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值