关于TIDB几个常见问题的解决办法

关于TIDB几个常见问题的解决办法

报错：Transaction is too large(交易量太大)
修改方法：
performance.txn-total-size-limit: 10737418240 在tidb下加此参数

txn-total-size-limit
TiDB 单个事务大小限制
默认值：104857600
单位：Byte
单个事务中，所有 key-value 记录的总大小不能超过该限制。该配置项的最大值不超过 10737418240（表示 10GB）。
注意，如果使用了以 Kafka 为下游消费者的 binlog，如：arbiter 集群，该配置项的值不能超过 1073741824（表示 1GB），因为这是 Kafka 的处理单条消息的最大限制，超过该限制 Kafka 将会报错。

报错：gc life time is shorter than transaction duration （gc生存期短于事务持续时间）
修改方法：
update mysql.tidb set variable_value=‘1h’ where variable_name=‘tidb_gc_life_time’; 设置gc超时时间

tidb_gc_life_time 从 v5.0 版本开始引入
作用域：GLOBAL
默认值：10m0s
范围：[10m0s, 8760h0m0s]
这个变量用于指定每次进行垃圾回收 (GC) 时保留数据的时限。变量值为 Go 的 Duration 字符串格式。每次进行 GC 时，将以当前时间减去该变量的值作为 safe point。
Note:

在数据频繁更新的场景下，将 tidb_gc_life_time 的值设置得过大（如数天甚至数月）可能会导致一些潜在的问题，如：
占用更多的存储空间。
大量的历史数据可能会在一定程度上影响系统性能，尤其是范围的查询（如 select count(*) from t）。
如果一个事务的运行时长超过了 tidb_gc_life_time 配置的值，在 GC 时，为了使这个事务可以继续正常运行，系统会保留从这个事务开始时间 start_ts 以来的数据。
例如，如果 tidb_gc_life_time 的值配置为 10 分钟，且在一次 GC 时，集群正在运行的事务中最早开始的那个事务已经运行了 15 分钟，那么本次 GC 将保留最近 15 分钟的数据。
3.
报错：this is incompatible with sql_mode=ONLY_FULL_GROUP_BY
(与ONLY_FULL_GROUP_BY不兼容）
修改方法：
set global sql_mode=‘STRICT_TRANS_TABLES,NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_AUTO_CREATE_USER,NO_ENGINE_SUBSTITUTION’; 设置sql_mode
sql_mode是一组语法校验规则
常用sql_mode
①ONLY_FULL_GROUP_BY
对于GROUP BY聚合操作，如果在SELECT中的列，没有在GROUP BY中出现，那么这个SQL是不合法的，因为列不在GROUP BY从句中
②NO_AUTO_VALUE_ON_ZERO
该值影响自增长列的插入。默认设置下，插入0或NULL代表生成下一个自增长值。如果用户希望插入的值为0，而该列又是自增长的，那么这个选项就有用了。
③STRICT_TRANS_TABLES
如果一个值不能插入到一个事务中，则中断当前的操作，对非事务表不做限制
④NO_ZERO_IN_DATE
不允许日期和月份为零
⑤NO_ZERO_DATE
mysql数据库不允许插入零日期，插入零日期会抛出错误而不是警告
⑥ERROR_FOR_DIVISION_BY_ZERO
在insert或update过程中，如果数据被零除，则产生错误而非警告。如果未给出该模式，那么数据被零除时Mysql返回NULL
⑦NO_AUTO_CREATE_USER
禁止GRANT创建密码为空的用户
⑧NO_ENGINE_SUBSTITUTION
如果需要的存储引擎被禁用或未编译，那么抛出错误。不设置此值时，用默认的存储引擎替代，并抛出一个异常
⑨PIPES_AS_CONCAT
将"||"视为字符串的连接操作符而非或运算符，这和Oracle数据库是一样是，也和字符串的拼接函数Concat想类似
⑩ANSI_QUOTES
不能用双引号来引用字符串，因为它被解释为识别符
4.
oom了，则是因为单条sql配置最大内存太小，或者sql占内存太大了
修改单条sql最大内存
tidb下修改
mem-quota-query: 21474836480
5.
处理函数长度上限问题：
修改GROUP_CONCAT函数存储字符串的最大长度
默认GROUP_CONCAT函数返回的结果大小被MySQL默认限制为1024（字节）的长度。
SET GLOBAL group_concat_max_len = 102400;

select * from mysql.GLOBAL_VARIABLES where variable_name = ‘group_concat_max_len’;