解决mysql的配置ONLY_FULL_GROUP_BY引起的错误

感谢mysql大师波多老师、GV大师伟嘉在这个问题上对我的帮助和启发,感谢!

以下是本人在使用 python-sqlalchemy 时遇到的问题,如果使用原生mysql语句同样需注意这个问题。

报错

OperationalError: (_mysql_exceptions.OperationalError) (1055, "Expression #1 of
SELECT list is not in GROUP BY clause and contains nonaggregated column 
'db.table.create_time' which is not functionally dependent on columns in 
GROUP BY clause; this is incompatible with sql_mode=only_full_group_by") [SQL: 
u'SELECT table.create_time AS table_create_time, table.count AS 
table_count \nFROM table \nWHERE table.cluster_id = %s AND 
table.create_time > %s GROUP BY table.count'] [parameters: (1, 
datetime.datetime(2000, 1, 1, 0, 0))]

原因:

mysql 5.7.5 版本开始,sql_mode 使用的是默认值( 如上),而之前使用的 mysql 配置文件中sql_mode="", 由于这个特性使在使用 group_by 时出现报错,以下是新版的默认值:

sql_mode默认值

默认的 sql-mode 里的 ONLY_FULL_GROUP_BY 字段导致不能直接查询 group_by 包裹之外的字段,如下使用,只查询 group_by 的字段可以正常使用,但是同时查询 create_time 和 count 字段会出现错误:

# 正确
session.query(Table.count).group_by(Table.count).all()
# 报错
session.query(Table.create_time,Table.count).group_by(Table.count).all()

解决办法:

  1. 修改 sql_mode
    如设置:sql_mode=""
    问题解决,但是由于 sql_mode="" 会带来可以预估的错误,如数据被截断等,所以这种方法有数据丢失的风险。

  2. 程序中改变查询语句的写法,group_by 之外的字段使用 func 函数修饰
    为了符合 ONLY_FULL_GROUP_BY=True 的要求,如下:
    参考
    那么使用方法2,程序中正确的写法示例如下:

from sqlalchemy import func

# 1. 注意:这样生成的数据结果为[(),()],列表中的结果是元组,而不是生成器,
# 如果要对结果进行解析,解析方式也跟原来的方式不一样
objs= session.query(func.any_value(Table.create_time,Table.count).
                    group_by(Table.count).all()


# 2. 但是如果在这样的写法中只需要使用count字段,写成 obj.count 是可以的
obj= session.query(func.any_value(Table.create_time,Table.count).
                   group_by(Table.count).first()

以下为sql_mode常用值的含义,参考自这里

  • ONLY_FULL_GROUP_BY:对于GROUP BY聚合操作,如果在SELECT中的列,没有在GROUP BY中出现,那么这个SQL是不合法的,因为列不在GROUP BY从句中
  • NO_AUTO_VALUE_ON_ZERO:该值影响自增长列的插入。默认设置下,插入0或NULL代表生成下一个自增长值。如果用户希望插入的值为0,而该列又是自增长的,那么这个选项就有用了。
  • STRICT_TRANS_TABLES:在该模式下,如果一个值不能插入到一个事务表中,则中断当前的操作,对非事务表不做限制
  • NO_ZERO_IN_DATE:在严格模式下,不允许日期和月份为零
  • NO_ZERO_DATE:设置该值,mysql数据库不允许插入零日期,插入零日期会抛出错误而不是警告。
  • ERROR_FOR_DIVISION_BY_ZERO:在INSERT或UPDATE过程中,如果数据被零除,则产生错误而非警告。如果未给出该模式,那么数据被零除时MySQL返回NULL
  • NO_AUTO_CREATE_USER:禁止GRANT创建密码为空的用户
  • NO_ENGINE_SUBSTITUTION:如果需要的存储引擎被禁用或未编译,那么抛出错误。不设置此值时,用默认的存储引擎替代,并抛出一个异常
  • PIPES_AS_CONCAT:将”||”视为字符串的连接操作符而非或运算符,这和Oracle数据库是一样的,也和字符串的拼接函数Concat相类似
  • ANSI_QUOTES:启用ANSI_QUOTES后,不能用双引号来引用字符串,因为它被解释为识别符
  • 1
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值