liuyiming0822的博客

缓存知识点缓存有哪些类型？缓存是高并发场景下提高热点数据访问性能的一个有效手段，在开发项目时会经常使用到。缓存的类型分为：本地缓存、分布式缓存和多级缓存。本地缓存：本地缓存就是在进程的内存中进行缓存，比如我们的 JVM 堆中，可以用 LRUMap 来实现，也可以使用 Ehcache 这样的工具来实现。本地缓存是内存访问，没有远程交互开销，性能最好，但是...

整体思考首先从高维度出发，整体思考问题。秒杀无外乎解决两个核心问题，一是并发读，一是并发写，对应到架构设计，就是高可用、一致性和高性能的要求。关于秒杀系统的设计思考，本文即基于此 3 层依次推进，简述如下： 高性能。秒杀涉及高读和高写的支持，如何支撑高并发，如何抵抗高IOPS？核心优化理念其实是类似的：高读就尽量"少读"或"读少"，高写就数据拆分。 本文将从动静分离、热...

ES 集群架构演进之路1、初始阶段订单中心ES初始阶段如一张白纸，架设方案基本没有，很多配置都是保持集群默认配置。整个集群部署在集团的弹性云上，ES集群的节点以及机器部署都比较混乱。同时按照集群维度来看，一个ES集群会有单点问题，显然对于订单中心业务来说也是不被允许的。2、集群隔离阶段和很多业务一样，ES集群采用的混布的方式。但由于订单中心ES存储的是线上订单数据，偶尔会发...

（1）为什么要用缓存集群这篇文章，咱们来聊聊热点缓存的架构优化问题。其实使用缓存集群的时候，最怕的就是热key、大value这两种情况，那啥叫热key大value呢？简单来说，热key，就是你的缓存集群中的某个key瞬间被数万甚至十万的并发请求打爆。大value，就是你的某个key对应的value可能有GB级的大小，导致查询value的时候导致网络相关的故障问题。这篇文章，我们就来聊聊热k...

高并发实战之幂等处理一、背景1. 前端重复提交选中的数据，应该后台只产生对应这个数据的一个反应结果。2. 我们发起一笔付款请求，应该只扣用户账户一次钱，当遇到网络重发或系统bug重发，也应该只扣一次钱；3. 发送消息，也应该只发一次，同样的短信发给用户，用户会哭的；4. 创建业务订单，一次业务请求只能创建一个，创建多个就会出大问题。二、什么事幂等一个操作，不论执行多...

统一身份认证系统模型用户首先通过客户端应用程序登录用户登录子系统，再通过身份认证接口向统一身份认证平台（LDAP）提出认证请求，统一身份认证平台对请求内容进行解析和实施访问控制，查询LDAP数据库中的用户身份信息和权限信息，进行身份识别和授权访问，将认证结果信息返回至统一身份认证平台和登录系统，对用户的登录请求作出接受或拒绝的响应。 统一身份认证服务的实现：   该系统的功能是建立一个能够服务于所...

网站从构建之初的很少有人问津，用户数量较少，并发量较低，到之后的拥有千万上亿用户，数万量级的高并发，之间经历了怎样的过程，小型网站架构是怎样逐步演化的，本文简单探讨下这方面的内容，主要参考《大型网站架构设计》，这本书知识点总结的还是比较全面的。1. 初始阶段网站开始是没有太多访问量的，只需一台服务器就绰绰有余了，应用程序，数据库，静态资源等全部都在一台服务器上，一般使用LAMP/LNMP（

过去几年中，我们一直在使用、构建和宣传消息队列，我们认为它们是很令人敬畏的，这也不是什么秘密。我们相信对任何架构或应用来说，消息队列都是一个至关重要的组件，下面是十个理由:1. 解耦 在项目启动之初来预测将来项目会碰到什么需求，是极其困难的。消息队列在处理过程中间插入了一个隐含的、基于数据的接口层，两边的处理过程都要实现这一接口。这允许你独立的扩展或修改两边的处理过程，只要确保它们遵守

引言互联网服务和BS架构的传统企业软件相比，系统规模上产生了量级的差距。例如传统BS企业内部门户只需要考虑数百人以及几千人的访问压力，而大型互联网服务有时需要考虑的是千万甚至上亿的用户；传统企业管理系统管理的物料信息等，可能只有数万或数十万条记录，而一个大型B2C网站的商品SKU动辄千万，考虑到商品信息更新的历史记录，商品订单记录等数据，更是天文数字。原始的SSH+DB的BS开发模

存储与架构分论坛上，淘宝网技术委员会主席，淘宝网核心工程师章文嵩向我们详细介绍了淘宝网图片处理与存储系统的架构。章文嵩博士的演讲日程包括了淘宝的整个系统架构、淘宝图片存储系统架构，淘宝网独立开发的TFS集群文件系统，前端CDN系统以及淘宝网在节能服务器方面的应用和探索。本文侧重介绍淘宝网图片处理与访问系统前端的CDN系统架构从商用系统到自主研发实际上，淘宝网对CDN

在开始谈我对架构本质的理解之前，先谈谈对今天技术沙龙主题的个人见解，千万级规模的网站感觉数量级是非常大的，对这个数量级我们战略上 要重 视 它 ， 战术上又 要 藐 视 它。先举个例子感受一下千万级到底是什么数量级？现在很流行的优步(Uber)，从媒体公布的信息看，它每天接单量平均在百万左右， 假如每天有10个小时的服务时间，平均QPS只有30左右。对于一个后台服务器，单机的平均QPS可以到达80