腾讯基础设施 20 年演进之路

最新推荐文章于 2020-11-27 14:42:20 发布

CSDN资讯

最新推荐文章于 2020-11-27 14:42:20 发布

阅读量4.8k

点赞数 1

分类专栏： CSDN 行业热点

本文链接：https://blog.csdn.net/csdnnews/article/details/102951529

版权

行业热点同时被 2 个专栏收录

321 篇文章 17 订阅

订阅专栏

CSDN

46 篇文章 7 订阅

订阅专栏

640?wx_fmt=jpeg

整理 | 唐小引

封图 | 付费下载自视觉中国

出品 | CSDN（ID：CSDNnews）

腾讯 20 年，业务发展几经变革。今天，在腾讯 Techo 开发者大会上，腾讯云副总裁、云架构平台部总经理谢明博士与我们分享了腾讯过往二十年在基础设施上的总体演进与创新，这是腾讯首次全面披露腾讯 20 年来在基础设施方面的技术积累。

在 Techo 大会上，谢明博士分享腾讯 20 年基础设施演进

譬如：

在服务器方面，腾讯为了应对业务进一步的极速爆发，研发了一套大规模上架管理系统，进而到今天，发布了针对云端场景做深度优化的自研服务器「星星海」；
在数据中心方面，按照「高速化、规模化、集约化、智能化」来不断演进；
网络层面，正在基于自研设备和 SDN 来构建第四代网络架构；
存储方面，腾讯云对象存储引擎 YottaStore 能够做到真正的按需扩容；
数据库方面，面对数据库性能、成本、扩展性等挑战，腾讯走上了自研数据库的道路，并在今天正式开源了分布式数据库 TBase；
……

从 2006 年加入腾讯以来，谢明博士主力负责海量数据存储及接入业务相关技术的研发，在数据存储、架构方面拥有着非常丰富的经验。在大会现场，谢明博士向 CSDN（ID：CSDNnews）回顾了自己在腾讯 13 年的生涯及对于基础设施建设的思考。

腾讯云副总裁、云架构平台部总经理谢明博士（作者摄于 Techo 现场）

从社交网络 Qzone 兴起做分布式存储，定制了国内第一款多盘存储服务器，到 QQ 农场带来高并发的写入，帮助早期滴滴构建基础建设，再到今天服务涵盖大中小型，谢明博士总结了腾讯在基础设施演进过程中的关键词 —— 「为云而生」。

谢博士这样说道：「以往我们做的很多的技术都是为了海量数据，面向大客户、大业务，动辄上千万、几千亿次的访问，而今天到了云时代，是普惠的，包含中小企业」。并且，「今天所面临的挑战和过去不一样，过去是针对某一个问题单点突破，解决主要矛盾，今天各种问题错综复杂，难度要大很多」。

在这过程中，腾讯从一开始基于开源，到逐渐发现开源软件难以满足业务发展而进行自研，腾讯基础建设能力逐渐形成，当前，腾讯不仅正在探索 AI、5G、IoT 的融合演进，同时至关重要的是，将逐渐将自己的基础能力开放出来，让更多的开发者及企业受益。

以下为谢明博士在 Techo 大会的演讲精粹整理：

我想从技术、架构等维度，和大家具体分享一下，过去 20 年，腾讯在基础设施领域的演进和创新之路。

作为全球最大的互联网公司之一，我们的 QQ 活跃用户达到 8 亿，微信超过 11 亿，同时还有多款亿级 App。这些海量业务的背后，离不开强大的基础设施来支撑。

640?wx_fmt=png

服务器

今年 5 月，腾讯全网服务器总量超过了 100 万台，成为中国首家服务器超过百万台的互联网公司。

现在回过头来看，其实，最早的时候，腾讯跟很多创业公司一样，用的是通用服务器。

但是，作为 ARPU 值比较低的互联网服务，需要对服务器成本进行严格控制，因此，我们早在 2007 年就定制了第一款 Twins 服务器。

之后，为应对业务进一步的极速爆发，我们开发了一套大规模上架管理系统，这套系统有效支持一天内交付 1000 台以上设备的能力，帮助我们度过了业务洪峰。

但是，到了云时代，客户对服务器的性能、成本、安全性等有了更高的要求。为应对这样的变化，我们刚刚在成都发布了一款真正为云而生的自研服务器「星星海」，这款服务器最大的特点是针对云端场景做深度优化，实现行业最优单核性能和最优单核 TCO，包括云服务实例综合性能提升 35%以上，最大负载能效提高 50%。

640?wx_fmt=png

数据中心

海量的服务器离不开大规模的数据中心，一个够用、好用的数据中心，已经绝不是「在一个房间放几台服务器，拉上电线网线，旁边放两台空调」这么简单了。

腾讯数据中心整体上是按照「高速化、规模化、集约化、智能化」来不断演进。

在最新的第四代数据中心 T-Block 建设中，我们通过将 IT、电力、空调的产品化，结合腾讯数据中心最佳模型及建设方法论，按照搭积木的方式，实现全数据中心的模块化配置及快速建设。

相比于传统大规模数据中心，现场施工周期减少 80%以上。同时，由于率先在行业内采用更高效率的制冷和供配电架构，系统能源使用效率得到有效提升。PUE 降低至 1.1，以一个拥有 30 万台服务器的园区为例，一年可节省 2.5 亿度电。

640?wx_fmt=png

网络

网络方面，今天我们已经与超过 100 家运营商建立了网络互连，出口带宽也超过了 100Tb。

实际上，腾讯前两代网络架构，基本上都是依赖商用路由器，通过人工或者工具的方法来运营和变更。但这种方式很难满足互联网业务快速发展及永不断线的要求。

于是在第三代网络架构中，我们在商用路由器之外，实现了独立的集中式路由控制器来统一管理，进行全局流量调度。比如，7 月份某运营商核心设备故障 3 个小时，腾讯网络 3 分钟切换出口恢复，类似的调度 19 年累计完成 549 次。

到了云时代，尤其是 5G 的商用，网络也遇到了新挑战，比如管理复杂，10 万级别商业网络设备，上百种型号，每种型号设备管理接口不一致。其次是弹性能力，商业路由器无法满足 IPV6 亿级别路由表项需求。第三是网络质量，用户需要更精细的租户粒度调度能力。

在这个背景下，腾讯基于自研设备和 SDN 来构建第四代网络架构。

比如，在自研设备上，腾讯自研交换机 TCS83 支持单芯片 100G 端口，自研光网络设备 OPC-4，单通道转发能力达到业界顶级 600G 水平。通过自研，网络设备 TCO 下降 20%+。

640?wx_fmt=png

计算

虚拟化技术的成熟，使得在超大规模数据中心和高速互联网络的基础上提供云服务成为了可能，腾讯云主机管控平台 Vstation 做到了每分钟交付千台虚拟机的能力，使得一个中等规模公司的计算需求可以快速得到满足。

随着云计算的进一步发展，用户对弹性能力要求越来越高，除了 CPU 和内存以外，将存储和网络也从计算实例解耦出来成了必然选择。现在，腾讯已经通过虚拟网络 VPC 和软件定义存储 SDS 做到了内外网 IP 随意漂移和云盘的灵活挂载，再结合虚拟机的热迁移技术，做到虚拟机在物理母机间的无感迁移，有效满足物理资源升级容错的需求。

640?wx_fmt=png