大容量网站系统技术概览

web LAMP all in one  配置至强8核16G内存500G硬盘100M电信独享带宽

注册用户> 在线用户>并发数

1200： 1s平均打开网站的时间

1500: 2s

1800：10s 性能，用户体验，请求响应--http事务，每秒钟处理事务的能力

 

扩展类型：

Scale up:向上，具有更强大处理能力的主机

Scale out: n多台主机，服务器之间如何良好的配合工作

HA: 服务可用性

平均无故障时间/(平均无故障时间+平均修复时间)

95%，99%，99.9%，99.99%，99.999%

LB-->HA

LB:

tcp: lvs, haproxy

应用层：nginx,haproxy,ats

缓存：varnish, squid

HA:heartbeat, corosync, keepalived ,iscsi, gfs2,drbd

 

MogileFS (分布式图片存储技术)

NoSQL:MongoDB

 

 

集群类型：

LB： Load banlancing 扩展容量，伸缩性

HA：High Availability 高可用集群，服务可用性

HP:  High Performace

      向量机

      并行处理集群

LB： lvs ,(Tcp 层，转发能力很好，控制力不好，监控困难)

       haproxy(TCP层，http层)

       nginx(高性能缓存能力)

HA:  heartbeat

      corosync+pacemaker

      cman+pacemaker

      keepalived

      ultramonkey

 

集群文件系统和分布式文件系统的联系和区别

 

HP: hadoop

 

调度器，分发器，负载均衡器LB

HA解决单点故障

 

保持用户会话信息：session (加入购物车中的商品信息)

源地址绑定，破坏均衡，服务器故障时的会话问题

共享session服务器上，

 

图片服务集群，分布式存储，分布式文件系统

 

搜索，把数据库中的所有数据抽取出来，遍历每一个页面，建立关键字索引，不断地更新索引

 

引入队列，做异步调用处理(店家发布产品)

 

云，调度和生产分离，不关心具体节点和实例

 

日志分析，千万PV，数亿日志，分布式存储，分布式处理，并行处理,hadoop,

   工作在内存中的数据库，redis

Nosql,分布式存储问题，实时存储问题

 

现在缓存中返回，将缓存分布出去，各地机房里面都有我们的缓存服务器，每个用户请求时直接从本地返回，本地没有，到公司的缓存服务器中去取，公司的缓存服务器上没有，到真正的应用服务器上去取