本文从变更前,变更中,变更后三个阶段总结变更需要注意的地方。
变更原则
- 在编写变更方案,实施变更过程中,考虑如何将变更对业务的影响降到最低;
- 涉及多个产品,业务的重大变更,考虑能否将重大变更划分成多个小变更,分多次,多个窗口完成;
- 变更必须准备应急方案和回退方案。
变更前
变更前必须准备变更方案,方案应内容包括以下内容:
- 描述变更背景。说明变更的原因;
- 描述变更目标。变更需要达成的目标;
- 列出变更所需要的物资。例如软件升级需要准备升级的软件,工具,布线,模块,光纤等;
- 从高层级的角度整个变更采用的方案,步骤,以及每个步骤要实现的目标,造成的影响,验证方式;
- 详细描述变更前需要业务状态和网络状态,以便变更后进行对比;
- 详细描述每个变更步骤开始时间,结束时间,使用的命令,脚本和验证方式;
- 描述变更结束后需要验证的内容和方法;
- 描述变更回退条件,回退步骤,和回退后验证;
- 描述变更应急预案;
变更方案完成后,需要根据变更的级别和变更管理流程,获得相应的批准。获得批准后,可以开始准备变更所需的物料和例如准备软件,工具,布线,设备上架等,并且通知业务相关方计划变更时间,完成时间,造成影响,以及确定业务层变更后验证人。
变更中
变更过程中,需要注意以下几点:
- 变更开始前,记录业务状态和网络状态,用于与变更后对比;
- 变更开始时,需要通知监控室和业务相关相关方,变更开始,记录变更时间
- 变更过程中,根据变更方案中的步骤,每完成一步,确认是否符合预期;同时注意观察关键网络指标,业务指标,是否有指标下降的情况。
- 如遇到变更无法再继续,或到达回退时间仍然无法完成,则开始准备回退或启动应急预案
变更后
- 通知监控和相关方,变更完成或回退状态;
- 根据检查变更方案中的验证方案,对网络和业务进行验证;
- 变更复盘。对变更过程遇到的意外,或失败原因进行复盘,总结经验。
网络变更check-list:
对于网络变更,通常可以从以下角度验证变更结果:
- 接口状态前后对比,包括物理接口,子接口,虚拟接口;
- ARP ,MAC 地址前后对比;
- IGP邻居状态,BGP邻居状态,LDP状态对比
- vrf , globel路由表条目数量对比;
- 接口流量变更前后流量变化;
- syslog日志对比;