weixin_49421012的博客

原创 Hive开启hive.cbo.enable后丢数据

1、用户反馈在执行一个脚本时丢了一部分数据，问题的表现是，这个脚本运行的结果不包含index_code=BIZ_JTWL_AT_0079，BIZ_JTWL_AT_0080，BIZ_JTWL_AT_0081，BIZ_JTWL_AT_0082这4个指标。4、同样的sql语句我的查询是有结果的，而用户的是没有结果的，区别就在于两个查询使用的参数是不同的，进一步排查用户使用的参数。以上为用户sql造成本次问题的部分逻辑，我经过简化处理的。在第一次表扫描时过滤，而用户的逻辑是在第一扫描后将部分。果然是没有查出数据！