技术分析：各大门户网站的CDN架构设计

最新推荐文章于 2023-06-26 14:11:45 发布
最新推荐文章于 2023-06-26 14:11:45 发布
阅读量705 收藏
点赞数
文章标签： 架构设计 服务器 server 负载均衡 集群 缓存服务器
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lgm252008/article/details/5398304
版权

 

1、 新浪

　　新浪采用了ChinaCache做的CDN系统，ChinaCache在全国分布了四十多个点，同时采用基于动态DNS分配的全球服务器负载均衡技术。

　　从新浪的站点结构可以看出：

　　> www.sina.com.cn

　　Server: UnKnown

　　Address: 192.168.1.254

　　Non-authoritative answer:

　　Name: libra.sina.com.cn

　　Addresses: 61.135.152.71, 61.135.152.72, 61.135.152.73, 61.135.152.74 61.135.152.75, 61.135.152.76, 61.135.153.181, 61.135.153.182, 61.135.53.183, 61.135.153.184, 61.135.152.65, 61.135.152.66, 61.135.152.67, 61.135.12.68, 61.135.152.69, 61.135.152.70

　　Aliases: www.sina.com.cn, jupiter.sina.com.cn

　　在北京地区ChinaCache将www.sina.com.cn的网址解析到libra.sina.com.cn，然后libra.sina.com.cn做了DNS负载均衡，将libra.sina.com.cn解析到61.135.152.71等16个ip上，这16个ip分布在北京的多台前台缓存服务器上，使用squid做前台缓存。如果是在其它地区访问www.sina.com.cn可能解析到本地相应的服务器，例如pavo.sina.com.cn，然后pavo又对应了很多做了squid的ip。这样就实现了在不同地区访问自动转到最近的服务器访问，达到加快访问速度的效果。

　　我们再看一个新浪其它频道是指到哪里的：

　　> news.sina.com.cn

　　Server: UnKnown

　　Address: 192.168.1.254

　　Non-authoritative answer:

　　Name: libra.sina.com.cn

　　Addresses: 61.135.152.65, 61.135.152.66, 61.135.152.67, 61.135.152.68 61.135.152.69, 61.135.152.70, 61.135.152.71, 61.135.152.72, 61.135.152.73 61.135.153.178, 61.135.153.179, 61.135.153.180, 61.135.153.181, 61.135.153.182 61.135.153.183, 61.135.153.184

　　Aliases: news.sina.com.cn, jupiter.sina.com.cn

　　可以看出，各个频道的前台缓存集群与www.sina.com.cn的前台缓存集群是相同的。

　　2、搜狐

　　Sohu与新浪的原理差不多，下面是nslookup的结果：

　　> www.sohu.com

　　Server: UnKnown

　　Address: 192.168.1.254

　　Non-authoritative answer:

　　Name: pagegrp1.sohu.com

　　Addresses: 61.135.132.172, 61.135.132.173, 61.135.132.176, 61.135.133.109 61.135.145.47, 61.135.150.65, 61.135.150.67, 61.135.150.69, 61.135.150.74 61.135.150.75, 61.135.150.113, 61.135.150.145, 61.135.131.73, 61.135.131.91 61.135.131.180, 61.135.131.182, 61.135.131.183, 61.135.132.65, 61.135.

　　132.80

　　Aliases: www.sohu.com

　　只不过libra.sina.com.cn换成了pagegrp1.sohu.com

　　我们再来看一下sohu的频道：

　　> news.sohu.com

　　Server: UnKnown

　　Address: 192.168.1.254

　　Non-authoritative answer:

　　Name: pagegrp1.sohu.com

　　Addresses: 61.135.145.47, 61.135.150.65, 61.135.150.67, 61.135.150.69 61.135.150.74, 61.135.150.75, 61.135.150.113, 61.135.150.145, 61.135.131.73 61.135.131.91, 61.135.131.180, 61.135.131.182, 61.135.131.183, 61.135.132.65 61.135.132.80, 61.135.132.172, 61.135.132.173, 61.135.132.176, 61.135.133.109

　　Aliases: news.sohu.com

　　同新浪相同，用的是同样的服务器群，这可能是因为他们用的都是ChinaCache的服务吧，不过sohu的名字起的有点土，pagegrp1，没有libra，pavo好听，这名字听起来有点像法语，比较浪漫。

　　3、网易

　　网易似乎没用ChinaCache的服务，下面是nslookup结果：

　　> www.163.com

　　Server: UnKnown

　　Address: 192.168.1.254

　　Non-authoritative answer:

　　Name: www.163.com

　　Addresses: 202.106.168.103, 202.106.168.104, 202.106.168.109, 202.106.168.121 202.108.36.153, 202.108.36.155, 202.108.36.156, 202.108.36.167, 202.108.36.172 202.108.36.196

　　直接在www.163.com 这个域名上做了DNS负载均衡。这样的话就要求服务器必须放的非常靠近主节点，才能保证各地的用户访问的速度。

　　但163不同的频道是放在不同的缓存集群上的，这与sina，sohu有些不同，等于sina，sohu是按照地区划分服务器集群，而网易按照频道划分服务器集群。

　　> 163.com

　　Server: UnKnown

　　Address: 192.168.1.254

　　Non-authoritative answer:

　　Name: 163.com

　　Addresses: 202.108.36.205, 202.108.36.206, 202.108.36.207, 202.108.36.201 202.108.36.202, 202.108.36.203, 202.108.36.204

　　显然，这和www.163.com不是一个集群，我们再来试一个：

　　> sports.163.com

　　Server: UnKnown

　　Address: 192.168.1.254

　　Non-authoritative answer:

　　Name: channel.cache.163.com

　　Addresses: 202.108.36.136, 202.108.36.208, 202.108.36.209, 202.108.36.210 202.108.36.211, 202.108.36.212, 202.108.36.213

　　Aliases: sports.163.com

　　可以看出，和上面的集群也是不同的。

    4、百度

　　百度的前台服务器就不是很多了：

　　> www.baidu.com

　　Server: UnKnown

　　Address: 192.168.1.254

　　Non-authoritative answer:

　　Name: www.baidu.com

　　Addresses: 202.108.250.249, 202.108.249.134

　　> baidu.com

　　Server: UnKnown

　　Address: 192.168.1.254

　　Non-authoritative answer:

　　Name: baidu.com

　　Address: 202.108.250.228

　　> mp3.baidu.com

　　Server: UnKnown

　　Address: 192.168.1.254

　　Non-authoritative answer:

　　Name: mp3.baidu.com

　　Address: 202.108.249.131

　　只有www.baidu.com做了两台服务器的集群，频道都用了一台服务器做前台

    5、一搜

　　> yisou.com

　　Server: UnKnown

　　Address: 192.168.1.254

　　Non-authoritative answer:

　　Name: yisou.com

　　Addresses: 202.165.102.114, 202.43.217.14, 202.43.217.15, 202.43.217.16 202.43.217.17, 202.165.102.111, 202.165.102.112, 202.165.102.113

　　> www.yisou.com

　　Server: UnKnown

　　Address: 192.168.1.254

　　Non-authoritative answer:

　　Name: www.yisou.com

　　Addresses: 202.43.217.17, 202.165.102.111, 202.165.102.112, 202.165.102.113 202.165.102.114, 202.43.217.14, 202.43.217.15, 202.43.217.16

　　> mp3.yisou.com

　　Server: UnKnown

　　Address: 192.168.1.254

　　Non-authoritative answer:

　　Name: www.yisou.com

　　Addresses: 202.165.102.113, 202.165.102.114, 202.43.217.14, 202.43.217.15 202.43.217.16, 202.43.217.17, 202.165.102.111, 22.165.102.112

　　Aliases: mp3.yisou.com

　　前台做了8台服务器的缓存集群，www.yisou.com和 yisou.com以及mp3.yisou.com是用的同一个集群。

　　通过前面的分析我们可以得到一个结论：sina和sohu使用了CDN与GSBL与DNS负载均衡技术，每个地区一组前台服务器群，网易，百度使用了DNS负载均衡技术，每个频道一组前台服务器，一搜使用了DNS负载技术，所有频道共用一组前台服务器集群

 

 

 

 

 

李纲明
关注
门户网站架构设计
04-24
全面的门户网站架构设计，包括设计思路，系统结构，网络规划及性能计算，性能模拟测试及性能推算等
[转]技术分析：各大门户网站的CDN架构设计
wolf的技术博客
05-12 737
1、 新浪 　　新浪采用了ChinaCache做的CDN系统，ChinaCache在全国分布了四十多个点，同时采用基于动态DNS分配的全球服务器负载均衡技术。 　　从新浪的站点结构可以看出： 　　> www.sina.com.cn 　　Server: UnKnown 　　Address: 192.168.1.254 　　Non-authoritative answer: 　　Name: libra
门户网站负载均衡技术的六大新挑战
金 色 的 草 棚
11-25 547
门户网站负载均衡技术的六大新挑战记得上大学时，我和好友老郭讨论最多的话题便是：“像新浪这样的网站是如何支撑如此巨大的访问量？”也曾通过各种手段，猜测新浪服务器的数量、操作系统和应用软件的版本……一切都是那么神秘。毕业那年，有幸加入新浪，终于一点点地揭开了这层神秘的面纱。2004年某厂商设备介绍会上，我初次接触到了负载均衡技术。之后的几年时间，可以说是负载均衡设备在网站推广的黄金爆发期。发展到今天，一方面硬件设备依然保持了强劲的实力，另一方面以LVS、Haproxy为代表的软件负载均衡也异军突起，被人们所认可
大型门户网站架构设计
05-26
中国矿业大学《软件架构》课程安排研讨内容的报告 设计一个基于云架构的大型门户网站，而基础三层架构会让网站在未来随着用户规模的增加、数据堆积等的运行及维护遇到一些困难，因此面对网站运行时可能遇到的一些问题进行了分析，接着根据各个问题提出解决方案，改进网站架构，保证了所设计网站的稳定运行。同时对其进行了一些优化，提高了网站的整体性能。
最全面的门户网站架构设计方案
hailingling的专栏
03-19 1205
[img]http://dl.iteye.com/upload/attachment/0065/0982/1964c2c4-4cdd-3aa8-9390-fa2c8ecc463b.jpg[/img]
架构设计（四）：CDN
Practitioner
12-16 1141
CDN 全称 Content delivery network ，即：内容分发网络。CDN 是一个地理上分散的服务器网络，主要用于提供静态内容。如：图片、视频、CSS、JavaScript 文件等。还有一种是动态内容缓存，它可以实现基于请求路径、查询字符串、cookies和请求头的HTML页面的缓存。参考。本文主要介绍 CDN 技术当用户访问一个网站时，离用户最近的 CDN 服务器将提供静态内容。也就是说，用户离 CDN 服务器越远，网站的加载速度就越慢。架构如下整个工作流程如下。
各大网站的CDN架构设计分析
weixin_34388207的博客
10-16 184
1、 新浪　　新浪采用了ChinaCache做的CDN系统，ChinaCache在全国分布了四十多个点，同时采用基于动态DNS分配的全球服务器负载均衡技术。　　从新浪的站点结构可以看出：　　>www.sina.com.cn　　Server: UnKnown　　Address: 192.168.1.254　　Non-authoritative answer:　　Name...
高负载门户网站系统架构
tas的专栏
06-09 1591
大型网站，比如门户网站。在面对大量用户访问、高并发请求方面，基本的解决方案集中在这样几个环节：使用高性能的服务器、高性能的数据库、高效率的编程语言、还有高性能的Web容器。但是除了这几个方面，还没法根本解决大型网站面临的高负载和高并发问题。 　　上面提供的几个解决思路在一定程度上也意味着更大的投入，并且这样的解决思路具备瓶颈，没有很好的扩展性，下面我从低成本、高性能和高扩张性的角度来说说我的一
如何精心设计CDN架构？
Enweitech Software Works
08-11 1048
导语：如何根据自身场景去设计一个CDN架构，或者如何选择以一个适合自己CDN服务提供商，这里面也有许多问题需要考量。 国内，随着互联网的高速发展，因为各大通信公司的政策，造成了南电信北联通互通有局限性，再加上大小且质量参差不齐的运营商，在这特殊的氛围的互联互通下号称“八线合一”的机房开始崭露头角。互联网的广泛性使得网民分散在全国各地，由于全国地区的经济发展和互联网建设的不平衡，实际网
一、大型网站架构设计
业精于勤荒于嬉
05-31 543
1.  架构 为了考虑web架构的伸缩性，扩展性及重用性，目前许多大型门户网站及大平台，均大量采用中间件的设计，中间件又细分为业务流中间件，服务中间件，消息队列中间件，缓存中间件，数据库中间件等。 整个架构是分层的分布式的架构，纵向包括CDN，负载均衡/反向代理，web应用，业务层，基础服务层，数据存储层。水平方向包括对整个平台的配置管理部署和监控。 2.  设计思路 1)  空间换时
浅析大型门户网站的架构
脑瓜子的程序人生
03-20 1109
一个小型的网站，比如个人网站，可以使用最简单的html静态页面就实现了，配合一些图片达到美化效果，所有的页面均存放在一个目录下，这样的网站对系统架构、性能的要求都很简单，随着互联网业务的不断丰富，网站相关的技术经过这些年的发展，已经细分到很细的方方面面，尤其对于大型网站来说，所采用的技术更是涉及面非常广，从硬件到软件、编程语言、数据库、WebServer、防火墙等各个领域都有了很高的要求，已经不是
各大门户网站的CDN架构设计
linhongdan的专栏
10-30 614
 1、 新浪 　　新浪采用了ChinaCache做的CDN系统，ChinaCache在全国分布了四十多个点，同时采用基于动态DNS分配的全球服务器负载均衡技术。 　　从新浪的站点结构可以看出： 　　> www.sina.com.cn 　　Server: UnKnown 　　Address: 192.168.1.254 　　Non-authoritative answer: 　　Name: libr
CDN设计原理
最新发布
qq_41194023的博客
06-26 217
CDN，即Content Delivery Network，中文名为内容分发网络，指的是分布式存储、缓存和调度技术，它将源站内容存储至全国甚至全球各地的节点服务器上，在用户请求时通过智能调度技术，使用户访问最近的服务节点，从而提高用户体验和网络传输质量。CDN中的DNS服务器，被称为“全局负载均衡器”，主要作用是根据用户请求的DNS域名，自动返回最佳的访问IP地址给客户端，以达到快速响应并降低网站出口带宽的目的。利用Java的日志系统，CDN系统可以记录和分析用户请求和系统状态。2. 大规模分布式计算。
关于CDN的部署思路和技术架构
weixin_30387663的博客
10-18 350
CDN的部署基本思路是尽可能避开互联网上有可能影响数据传输和稳定性的瓶颈和环节，使内容传输的更快、更稳定。通过在网络各处放置节点服务器所构成的在现有的互联网基础之上的一层智能虚拟网络，详情访问：www.imperva-incapsula.cn CDN系统能够实时地哥怒网络流量和各节点的连接、负载状况以及到用户的距离和响应时间等综合信息将用户的请求重新导向离用户最近的服务节点上。 目的是使用户可就...
简单CDN设计的基本原则
weixin_33853827的博客
08-14 269
2019独角兽企业重金招聘Python工程师标准>>> ...
CDN 为什么这么设计？
LoveSummer
06-15 4382
过去几十年，计算机网络把几乎全世界的计算机都连接了起来，我们只要把静态资源和动态的代码部署到服务器上，然后启动服务监听某个端口，这样世界各地的计算机就都能访问该网站。但是这样有个问题，资源最终还是通过物理层网络线路和设备传输的，每经过一段线路、一个网络设备都有一些耗时，所以客户端和服务器相距越远，网站打开速度就越慢。这就像你从海南买了一件东西，如果你人在广州的话，那可能很快就收到了，因为传输距离近，但如果你在北京的话，那可能就要多等几天了，因为中间经过的线路、节点都比较多。但这样肯定不行的，用户体验会很差。
基于Java技术的大型网站架构设计方案
热门推荐
JackieLiuLixi的专栏
05-23 1万+
基于Java技术的大型网站架构设计方案 笑游江湖 发表于 2014-03-16 16:56:00 | 分类标签: 网站架构 JAVA 高并发 1、Web层 主体架构可以基于 Struts 1.X/2.X，当然有很多更好的控制层框架供选择，以快速敏捷为准则吧。  抽象出核心库封装 控制器和中间层的操作。  在大规模集群环境下，session复制会引起严重的性能问题。考虑用 集群缓存 +
CDN架构
weixin_30279671的博客
02-26 628
CDN架构 CDN公司在整个互联网中部署了数以百计的节点（Cache服务器集群）。这些Cache服务器都分布在各个网络运营商的IDC机房中，位置尽量靠近用户网络。CDN系统将内容从源站复制到各个节点，在内容提供者更新内容时，CDN系统将更新后的内容重新分发到各个节点。当用户请求内容时，CDN系统将选择一个最优的节点向用户提供内容。这个挑选最优节点的过程，就是负载均衡。而这个最优节点...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值