2015年11月_lz0426001

转载架构是为业务服务的，一切不以业务为指标的架构都是耍流氓

为什么要谈架构？谈一谈过去一年，自己在建设小米广告平台的一些关于架构收获。最近一年，小米广告的业务飞速发展，架构不断进化，单一业务变成了近10个业务，研发人员也翻了3倍，广告请求流量翻了10倍还多，部署的机器也翻了近8倍，各个业务将继续保持高速发展。最近碰到一个困扰，我能看清楚三个月内架构进化的目标。但是，我却无法想清楚半年或一年后架构演化的蓝图？这个问题给我带来不少思考，直到最近，才理清楚了

2015-11-30 15:20:52 2292

转载 Nginx、LVS及HAProxy负载均衡软件的优缺点详解

Nginx/LVS/HAProxy是目前使用最广泛的三种负载均衡软件，本人都在多个项目中实施过，参考了一些资料，结合自己的一些使用经验，总结一下。一般对负载均衡的使用是随着网站规模的提升根据不同的阶段来使用不同的技术。具体的应用需求还得具体分析，如果是中小型的Web应用，比如日PV小于1000万，用Nginx就完全可以了；如果机器不少，可以用DNS轮询，LVS所耗费的机器还是比较多的；大型网站

2015-11-23 10:18:09 231

转载网络层技术剖析

互联网业务发展特点的另外两个方面“高性能”、“高可用”。一般人提到高性能时第一想到的就是优化，提到高可用时第一反应就是双机或者备份，但是对于互联网这种超大容量和访问量的业务来说，这两个手段都是雕虫小技，无法应对互联网业务的高性能和高可用需求，互联网业务的高可用和高性能，需要从更高的角度去设计，这个高点就是“网络”，所以我将这些措施统一划归为“网络层”。注意这里的网络层和大家通常理解的如何搭建一

2015-11-23 10:16:37 543

转载业务如何驱动技术发展

互联网业务千差万别，但由于他们具有“规模决定一切”的相同点，其发展路径也基本上是一致的。互联网业务发展一般分为几个时期：初创期、快速发展期、竞争期、成熟期。不同时期的差别主要体现在两个方面：复杂性、用户规模。复杂性业务的发展第一个主要方向就是“业务越来越复杂”，我们来看看不同时期业务的复杂性的表现。【初创期】互联网业务刚开始一般都是一个创新的业务点，这个业务点的重

2015-11-16 15:13:33 612

转载处理大数据的四个步骤

处理大数据的四个步骤：收集：原始数据种类多样，格式、位置、存储、时效性等迥异。数据收集从异构数据源中收集数据并转换成相应的格式方便处理。存储：收集好的数据需要根据成本、格式、查询、业务逻辑等需求，存放在合适的存储中，方便进一步的分析。变形：原始数据需要变形与增强之后才适合分析，比如网页日志中把IP地址替换成省市、传感器数据的纠错、用户行为统计等。分析：通过整理好的数据分析what happ

2015-11-09 23:27:24 12183

转载掌握的可伸缩Web开发技术

近些年来，越来越多的行业开始和互联网结合，诞生了越来越多的互联网创业公司。互联网创业公司需要面对许多的不确定因素。如果你和你的小伙伴们够幸运，你们的公司可能会在几个星期之内让用户数、商品数、订单量增长几十倍上百倍。一次促销可能会带来平时几十倍的访问流量，一次秒杀活动可能会吸引平时数百倍的访问用户。这对公司自然是极大的好事，说明产品得到认可，公司未来前景美妙。但是快速增长的用户和订单却对公司的技

2015-11-09 23:14:53 819

转载面向业务的立体化高可用架构设计

通常情况下我们在谈论高可用架构设计的时候，主要关注的是系统结构的高可用，例如主备架构、集群架构、多中心架构。我们做架构设计的时候，也主要是从系统结构本身出发，例如我们把单机改为双机、双机改为集群、单机房改为异地多机房等等。这种以系统结构为目标的高可用架构设计，更多的是从技术角度出发，但其实我们都知道，无论技术多先进，架构多强大，都不可能保证100%不出问题的。蓝翔的挖掘机一铲子下去，支付宝就要

2015-11-09 19:53:49 506

转载从MVC到前后端分离

1. 理解MVCMVC是一种经典的设计模式，全名为Model-View-Controller，即模型-视图-控制器。其中，模型是用于封装数据的载体，例如，在Java中一般通过一个简单的POJO（Plain Ordinary Java Object）来表示，其本质是一个普通的Java Bean，包含一系列的成员变量及其getter/setter方法。对于视图而言，它更加偏重于展现，也就是说，

2015-11-09 19:51:08 296

转载电商搜索引擎的架构设计和性能优化

电商搜索引擎的特点众所周知，标准的搜索引擎主要分成三个大的部分，第一步是爬虫系统，第二步是数据分析，第三步才是检索结果。首先，电商的搜索引擎并没有爬虫系统，因为所有的数据都是结构化的，一般都是微软的数据库或者Oracle的数据库，所以不用像百度一样用“爬虫”去不断去别的网站找内容，当然，电商其实也有自己的“爬虫”系统，一般都是抓取友商的价格，再对自己进行调整。第二点，就是电商搜索引擎的过滤

2015-11-02 09:53:14 2691

lz0426001的专栏