项目中有一张日志表,里面有个clob字段,专门用来保存定时任务的执行日志,上线已经一年多了,一直用的好好的,前两天突然发现有个任务的日志查询不出来了,界面上一直处于卡死状态,而且系统开始报警,资源占用飙升。后排查发现是日志的clob字段过大造成的。
正常的日志大小都不超过100K,查询也做了分页,每页20条,所以一直没有问题。而前几天有个大数据量的定时任务执行全部失败了,导致写入该字段的数据大小达到了70余M,最终导致请求时,数据查不出来。
解决办法:控制了写入字段的大小,超过两万个字符就进行了截取。
后续准备将大字段存入hbase再进行分析。oracel承受不了这么大。