![](https://i-blog.csdnimg.cn/blog_migrate/c0db97754f1e5f48975abf17dcd38958.jpeg)
郑昀 创建于2017/3/8 最后更新于2017/3/10
关键词:研发协作,Docker,环境变量,开发联调,环境维护,虚拟机,中间件,配置与代码分离,git,jenkins
开发联调,测试,预发,生产,稍微上规模的互联网技术团队,每一次发布都需要经历这四个阶段。每一个阶段都对应于一个环境。所以我们会面对:
开发联调环境,测试环境,预发环境,生产环境。
产品线若干条。并发多个版本。工程无数,有Java,有PHP,有中间件。
说句狠话:没有趁手的利器,生产效率打完对折再打对折,勿谓言之不预也。
云纵有 CloudEngine,如我的《私有云的难处—为什么需要CloudEngine?》和《#研发解决方案#研发协作平台CloudEngine》文章所述,我以为能非常流畅地打通这四个环境,即使生产环境是混合云,即使应用可能发布在Docker容器里也可能发布在虚拟机里。
陈皓同学在《从Gitlab误删除数据库想到的》中说道:
一个公司的运维能力的强弱和你上线上环境敲命令是有关的,你越是喜欢上线敲命令,你的运维能力就越弱,越是通过自动化来处理问题,你的运维能力就越强。
而我希望的是:
环境维护,应用部署,只是勾勾点点,没有心理负担,dont make me think。
一个代码分支,对应的一个包(或镜像,对应于 Docker 的 Image),可以流经开发联调环境、测试环境,直接上预发环境,上生产环境,上云端,一路穿行没有障碍,全程无需手工干预,无需手工改配置文件重新打包。
这么思考问题的原因也很简单,我们笃信工程师文化,靠技术而不是管理解决问题,正如陈皓同学所言:
如果你是一个技术公司,你就会更多的相信技术而不是管理。相信技术会用技术来解决问题。相信管理,那就只会由制度、流程和价值观来解决问题。
那么怎么办到呢?
先来一个管中窥豹:
图0 管中窥豹,CE里是怎么申请服务器资源的
再来品尝一下关键点。
一,用工具管好配置
我之前说过:
要做到真正的大环境一致,必须将配置完全与代码分离,这里的配置不仅仅是服务之间的 IP 地址/内部域名/自动发现,还包括不同环境下不同应用的配置参数等。
首先我们把与环境相关的参数都存储在持久化配置中心里,比如 redis/zk 的访问域名,比如第三方合作伙伴的接口IP地址等。
其次,每个应用也都有自己的配置模板,不同环境部署的应用默认继承配置模板,我们可以通过 CloudEngine 对配置做一些微调,也就是下面要讲到的“临时属性信息”了。
CloudEngine 和 SimpleWay 会把环境标识(如 dev/dev-stable/test/test-stable/product 等)和需求工单号,以环境变量的方式打入“服务器”(即容器或虚拟机)里。
工程通过环境变量确认自己在哪一个环境里,对应哪一个需求工单,从而从持久化配置中心读取到当前环境和当前需求对应的属性信息。
所谓属性信息有三类:
1)环境属性信息:
环境的配置信息在环境层级设置,对应于“环境管理”菜单。比如开发稳定环境下的环境变量,我可以通过如下界面统一配置:
(图1 环境属性信息)
2)应用属性信息:
应用的配置信息在应用层级设置,对应于“应用管理”菜单。比如janus工程(Java)的应用配置,我可以通过如下界面来配置:
(图2 应用属性信息)
3)临时属性信息:
应用实例的配置信息在服务器层级设置,对应于“服务器管理”菜单。也就是这次我申请机器资源时,可以通过如下界面设置好临时属性信息,只有这个应用实例能访问到:
(图3 临时属性信息)
二,区分出稳定环境和非稳定环境
以前没有 CloudEngine 的时候,我们会维护三套测试环境:常规分支测试环境,紧急分支测试环境,特殊分支测试环境。分别对应于上线的班车模式(每周固定发车),警车模式(bugfix),专车模式(版本很大,开发和测试周期较长)。
维护三套测试环境,真心累。
现在只需要维护一套测试环境。
那么问题来了,多个需求工单,怎么在一套环境里并行测试?
秘诀就是,在环境里再建一个稳定环境(Stable)。
稳定环境里的应用,只会部署 Release 版本。
根据需求工单申请的新服务器资源,可以访问稳定环境里的业务中心,至少能保证相关业务能正常运行,不会说突然功能不能用了,突然服务宕机了。
三,外网请求如何路由
如果开发联调环境和测试环境里的应用需要接受外网的请求,那么在 CloudEngine 里也不需要反复申请外网域名。统一使用 router.yourcompany.com 域名接受外网请求,然后通过 nginx 转发请求到相应的内网应用。
图4 是否需要接受外网请求
四,与git紧密结合
在相应的环境里,申请服务器资源时,你不需要键入 git 的代码分支,你输入应用名称,选好应用之后,系统会自动列出相应的分支,智能吧:
图5 分支自动展现
这充分体现了我们的哲学:dont make me think。
五,小结
我们技术团队可以标准化输出的成体系的通用技术能力有:
1)
基于虚拟机集群和容器集群的研发协作平台:
申请服务器资源(虚拟机或容器),自动化构建,自动化部署,可自动发布到我们自己的公司机房、阿里云、蚂蚁金融云和IDC机房,支持版本回滚;
2)
电商全套中间件解决方案:
-
定时任务管理与调度平台,
-
异步消息可靠推送系统,
-
分布式并行计算调度和管理系统,
-
一站式智能监控报警平台,
-
分布式跟踪系统,
-
分布式缓存管理系统,
-
数据库自动化运维平台,
3)
大数据全套解决方案:
-
自助式报表平台,
-
即席查询系统,
-
数据库变更订阅中心,
-
实时数据大屏发布平台,
-
大数据计算任务发布管理平台,
4)
运维基础设施:
-
运维自动化平台,
-
云平台基础(虚拟机集群和容器集群),
-
大数据分析栈架构。
此体系绝非一朝一夕所能搭建,这是秉承着平凡人做非凡事的理念,一群信仰技术的工程师边开飞机边换引擎,花了几年岁月建造的森严有序的技术体系。
-EOF-
欢迎长按二维码订阅我的微信订阅号『老兵笔记』
注1:
头图来自于 http://huaban.com/boards/34529674/ 绵羊修道士的练笔之作。
注2:
张勇曰:
Joe有一次我们对于海外资本市场业绩发布会上讲过一句话,我觉得还是挺有意思的。
他说,we work for now,we invest for tomorrow,we incubate for future(我们为今天工作,为未来投资,为未来孵化一些东西)。最后一句比较特别,为未来冒出来的一二十个小芽里,有一个芽发了,那就大发了,完全变成一个新的未来的主力业务。
注3:
前阵子听某公司技术负责人讲他们的工程师文化,我总结了一下:
1、不养闲人,选择能“在一起”的人。
2、进人慢,出人快,该淘汰就淘汰。
3、追求技术巅峰,鼓励内部分享。
4、技术上任何人可以挑战任何人,你行你就上。
5、不做技术/语言之争,只看效果。
6、讨论阶段民主,执行阶段专制。
——tombkeeper
注4:
从事任何技术研究,不知道该干什么的时候,就问自己四个问题:
•这个方向上最新进展是什么? 都知道吗?
•这个方向上最著名的专家有哪些?他们的研究都看过吗?
•这个方向上最著名的技术社区有哪些?精华帖都看过一遍吗?
•这个方向上最重要的文章、工具有哪些?文章都看过吗?工具都分析过吗?
——tombkeeper
-OVER-