线上CPU飙升问题回顾

接上篇List4种遍历方式，方式一可以操作list，但是需要谨慎，让我想起了朋友公司的一个线上事故。

事件还原

某日朋友联系我说他们公司线上出事故，线上机器CPU一直飙升，还在定位问题，大家一起沟通下，什么原因导致CPU飙升，内存没有太大变化。
1.最近仅有一个小版本上线
2.小版本上线前线上一切安好
3.小版本上线仅有一段平淡无奇的while(true)循环，循环内有一个当前时间按照【某计算规则】计算后的时间与一个配置比较作为退出。

分析过程如下

1.因为整个服务还能运转，只是CPU飙升，故分析是否是并发量大加上【某计算规则】过于耗性能导致。通过apm工具查看，此时系统并发并不大，同事计算规则在本地执行发现并无暂用太多CPU时间。故第一点排除
2.重点回到while循环中，while(true),循环出口只能是程序内配置条件作为退出出口。对比线上与测试环境配置，得出线上配置数据异常导致循环无法正常退出。

心得

• 1.循环一定要控制好出口。
• 2.循环时，出口请勿动态增长。如List遍历的第一种方式，如果在一定条件下存在循环量动态增长无法正常退出的情况
• 3.线上配置也要被测试用例覆盖，不能因为线上场景特殊，仅为了满足测试而测试。
• 4.灰度发布，用户无感，即使出现问题也不影响用户。