sparksql 中between and时间字符串转化

最新推荐文章于 2024-08-08 02:11:32 发布

TURBODW

最新推荐文章于 2024-08-08 02:11:32 发布

阅读量3.3k

点赞数 2

分类专栏： spark 文章标签： sparksql between and

本文链接：https://blog.csdn.net/weixin_42861725/article/details/102669244

版权

本文记录了在使用SparkSQL查询时遇到的一个问题，涉及between and操作与时间字符串的转换。在查询数据库表test_table时，原始查询未能返回预期结果，但通过调整SparkSQL语句，当valid_date等于2019-10-18时，成功获取到了760条user_id及对应的count数据。

摘要由CSDN通过智能技术生成

sparksql 中between and 字符串转化

记一个问题

记一个问题

在写sparksql的时候,出现的问题, 数据库中表 test_table 的格式

valid_date	user_id	total_balance
date	用户id	交易总金额

// 执行spark 语句1
spark.sql("SELECT user_id from test_table where  valid_date between '2019-10-18 00:00:00' and '2019-10-18 23:59:59' group by user_id having min(total_balance)> 20000 ").count()