- 博客(453)
- 资源 (11)
- 收藏
- 关注
RSS订阅原创 随笔(1)Java中的数组和List集合以及类型强转
在java中,集合操作有两种方式——容器、数组；容器相比较于数组，多了可扩展性，这里仅以容器的代表List，来对比和数组的关系。都知道在java引入的泛型和自动拆装箱等语法糖后，集合操作也变得简单安全。也都知道其实泛型在到字节码层面上时，会被擦除，虽然字节码中还会保留泛型参数（可以利用反射看到），但对真实的的类并不产生多大影响。那么，对于List来说，如果泛型存在继承关系，是否可以强行...
2019-05-19 16:19:25
11696
原创 前端(1)js对象克隆
大家都知道，js的对象是引用类型,如果直接var obj2 = obj，obj2和obj是共享同一个对象实体的，这往往不是我们想要的结果。官方并没有给出通用的对象克隆方法：我们给出以下几种写法：1.通用对象克隆：function clone(obj){ let temp = null; if(obj instanceof Array){ temp = obj...
2019-05-19 16:12:10
12944
1
原创 mysql(0) 汇总
一、索引B+ Tree 原理1. 数据结构B Tree 指的是 Balance Tree，也就是平衡树。平衡树是一颗查找树，并且所有叶子节点位于同一层。B+ Tree 是基于 B Tree 和叶子节点顺序访问指针进行实现，它具有 B Tree 的平衡性，并且通过顺序访问指针来提高区间查询的性能。在 B+ Tree 中，一个节点中的 key 从左到右非递减排列，如果某个指针的左右相邻 ke...
2019-05-15 09:06:10
10956
原创 mysql(14) 分库与分表带来的分布式困境与应对之策
随着用户数的不断增加，以及数据量的不断增加，通过分库与分表的方式提高查询性能的同时，带来了一系列分布式困境。数据迁移与扩容问题前面介绍到水平分表策略归纳总结为随机分表和连续分表两种情况。连续分表有可能存在数据热点的问题，有些表可能会被频繁地查询从而造成较大压力，热数据的表就成为了整个库的瓶颈，而有些表可能存的是历史数据，很少需要被查询到。连续分表的另外一个好处在于比较容易，不需要考虑迁移旧的数...
2019-05-15 08:33:48
10894
原创 mysql(13) 大众点评订单系统分库分表实践
原大众点评的订单单表早就已经突破两百G，由于查询维度较多，即使加了两个从库，优化索引，仍然存在很多查询不理想的情况。去年大量抢购活动的开展，使数据库达到瓶颈，应用只能通过限速、异步队列等对其进行保护；业务需求层出不穷，原有的订单模型很难满足业务需求，但是基于原订单表的DDL又非常吃力，无法达到业务要求。随着这些问题越来越突出，订单数据库的切分就愈发急迫了。这次切分，我们的目标是未来十年内不需要担...
2019-05-15 08:27:50
10960
1
原创 mysql(12) 20+条MySQL性能优化的最佳经验
1. 为查询缓存优化你的查询大多数的MySQL服务器都开启了查询缓存。这是提高性最有效的方法之一，而且这是被MySQL的数据库引擎处理的。当有很多相同的查询被执行了多次的时候，这些查询结果会被放到一个缓存中，这样，后续的相同的查询就不用操作表而直接访问缓存结果了。这里最主要的问题是，对于程序员来说，这个事情是很容易被忽略的。因为，我们某些查询语句会让MySQL不使用缓存。请看下面的示例：//...
2019-05-15 08:22:53
10748
原创 精选(78) 面试题： redis 的持久化有哪几种方式？不同的持久化机制都有什么优缺点？持久化机制具体底层是如何实现的？
面试题redis 的持久化有哪几种方式？不同的持久化机制都有什么优缺点？持久化机制具体底层是如何实现的？面试官心理分析redis 如果仅仅只是将数据缓存在内存里面，如果 redis 宕机了再重启，内存里的数据就全部都弄丢了啊。你必须得用 redis 的持久化机制，将数据写入内存的同时，异步的慢慢的将数据写入磁盘文件里，进行持久化。如果 redis 宕机重启，自动从磁盘上加载之前持久化的一些...
2019-05-15 08:17:45
10578
原创 精选(77) 面试题： redis 集群模式的工作原理能说一下么？在集群模式下，redis 的 key 是如何寻址的？分布式寻址都有哪些算法？了解一致性 hash 算法吗？
面试题redis 集群模式的工作原理能说一下么？在集群模式下，redis 的 key 是如何寻址的？分布式寻址都有哪些算法？了解一致性 hash 算法吗？面试官心理分析在前几年，redis 如果要搞几个节点，每个节点存储一部分的数据，得借助一些中间件来实现，比如说有 codis，或者 twemproxy，都有。有一些 redis 中间件，你读写 redis 中间件，redis 中间件负责将你...
2019-05-15 08:16:05
12012
1
原创 精选(76) 面试题： 如何设计一个高并发系统？
面试题如何设计一个高并发系统？面试官心理分析说实话，如果面试官问你这个题目，那么你必须要使出全身吃奶劲了。为啥？因为你没看到现在很多公司招聘的 JD 里都是说啥，有高并发就经验者优先。如果你确实有真才实学，在互联网公司里干过高并发系统，那你确实拿 offer 基本如探囊取物，没啥问题。面试官也绝对不会这样来问你，否则他就是蠢。假设你在某知名电商公司干过高并发系统，用户上亿，一天流量几十亿...
2019-05-15 08:11:45
10808
原创 精选(75) 面试题： 你们有没有做 MySQL 读写分离？如何实现 MySQL 的读写分离？MySQL 主从复制原理的是啥？如何解决 MySQL 主从同步的延时问题？
面试题你们有没有做 MySQL 读写分离？如何实现 MySQL 的读写分离？MySQL 主从复制原理的是啥？如何解决 MySQL 主从同步的延时问题？面试官心理分析高并发这个阶段，肯定是需要做读写分离的，啥意思？因为实际上大部分的互联网公司，一些网站，或者是 app，其实都是读多写少。所以针对这个情况，就是写一个主库，但是主库挂多个从库，然后从多个从库来读，那不就可以支撑更高的读并发压力了吗...
2019-05-15 08:10:03
10858
原创 精选(74) 面试题： 现在有一个未分库分表的系统，未来要分库分表，如何设计才可以让系统从未分库分表动态切换到分库分表上？
面试题现在有一个未分库分表的系统，未来要分库分表，如何设计才可以让系统从未分库分表动态切换到分库分表上？面试官心理分析你看看，你现在已经明白为啥要分库分表了，你也知道常用的分库分表中间件了，你也设计好你们如何分库分表的方案了（水平拆分、垂直拆分、分表），那问题来了，你接下来该怎么把你那个单库单表的系统给迁移到分库分表上去？所以这都是一环扣一环的，就是看你有没有全流程经历过这个过程。面试题...
2019-05-15 08:08:31
10510
原创 精选(73) 面试题： redis 的并发竞争问题是什么？如何解决这个问题？了解 redis 事务的 CAS 方案吗？
面试题redis 的并发竞争问题是什么？如何解决这个问题？了解 redis 事务的 CAS 方案吗？面试官心理分析这个也是线上非常常见的一个问题，就是多客户端同时并发写一个 key，可能本来应该先到的数据后到了，导致数据版本错了；或者是多客户端同时获取一个 key，修改值之后再写回去，只要顺序错了，数据就错了。而且 redis 自己就有天然解决这个问题的 CAS 类的乐观锁方案。面试题剖...
2019-05-15 08:05:31
10466
原创 精选(72) 面试题： 如何保证缓存与数据库的双写一致性？
面试题如何保证缓存与数据库的双写一致性？面试官心理分析你只要用缓存，就可能会涉及到缓存与数据库双存储双写，你只要是双写，就一定会有数据一致性的问题，那么你如何解决一致性问题？面试题剖析一般来说，如果允许缓存可以稍微的跟数据库偶尔有不一致的情况，也就是说如果你的系统不是严格要求 “缓存+数据库” 必须保持一致性的话，最好不要做这个方案，即：读请求和写请求串行化，串到一个内存队列里去。串行...
2019-05-15 08:04:15
11597
原创 精选(71) 面试题：分库分表之后，id 主键如何处理？
面试题分库分表之后，id 主键如何处理？面试官心理分析其实这是分库分表之后你必然要面对的一个问题，就是 id 咋生成？因为要是分成多个表之后，每个表都是从 1 开始累加，那肯定不对啊，需要一个全局唯一的 id 来支持。所以这都是你实际生产环境中必须考虑的问题。面试题剖析基于数据库的实现方案数据库自增 id这个就是说你的系统里每次得到一个 id，都是往一个库的一个表里插入一条没什么业务...
2019-05-14 23:25:37
11565
原创 精选(70) 面试题：如何设计可以动态扩容缩容的分库分表方案？
面试题如何设计可以动态扩容缩容的分库分表方案？面试官心理分析对于分库分表来说，主要是面对以下问题：选择一个数据库中间件，调研、学习、测试；设计你的分库分表的一个方案，你要分成多少个库，每个库分成多少个表，比如 3 个库，每个库 4 个表；基于选择好的数据库中间件，以及在测试环境建立好的分库分表的环境，然后测试一下能否正常进行分库分表的读写；完成单库单表到分库分表的迁移，双写方案；...
2019-05-14 23:18:03
11331
原创 精选(69) 面试题：为什么要分库分表（设计高并发系统的时候，数据库层面该如何设计）？
面试题为什么要分库分表（设计高并发系统的时候，数据库层面该如何设计）？用过哪些分库分表中间件？不同的分库分表中间件都有什么优点和缺点？你们具体是如何对数据库如何进行垂直拆分或水平拆分的？面试官心理分析其实这块肯定是扯到高并发了，因为分库分表一定是为了支撑高并发、数据量大两个问题的。而且现在说实话，尤其是互联网类的公司面试，基本上都会来这么一下，分库分表如此普遍的技术问题，不问实在是不行，而如...
2019-05-14 23:15:50
11549
原创 Hystrix(11) 基于 timeout 机制为服务接口调用超时提供安全保护
深入 Hystrix 线程池隔离与接口限流前面讲了 Hystrix 的 request cache 请求缓存、fallback 优雅降级、circuit breaker 断路器快速熔断，这一讲，我们来详细说说 Hystrix 的线程池隔离与接口限流。Hystrix 通过判断线程池或者信号量是否已满，超出容量的请求，直接 Reject 走降级，从而达到限流的作用。限流是限制对后端的服务的访问...
2019-05-14 23:02:57
11308
1
原创 Hystrix(10) 深入 Hystrix 线程池隔离与接口限流
深入 Hystrix 线程池隔离与接口限流前面讲了 Hystrix 的 request cache 请求缓存、fallback 优雅降级、circuit breaker 断路器快速熔断，这一讲，我们来详细说说 Hystrix 的线程池隔离与接口限流。Hystrix 通过判断线程池或者信号量是否已满，超出容量的请求，直接 Reject 走降级，从而达到限流的作用。限流是限制对后端的服务的访问...
2019-05-14 23:01:06
11388
原创 Hystrix(9) 深入 Hystrix 断路器执行原理
深入 Hystrix 断路器执行原理RequestVolumeThresholdHystrixCommandProperties.Setter() .withCircuitBreakerRequestVolumeThreshold(int)表示在滑动窗口中，至少有多少个请求，才可能触发断路。Hystrix 经过断路器的流量超过了一定的阈值，才有可能触发断路。比如说，要求在 10s...
2019-05-14 22:59:26
11162
原创 Hystrix(8) 基于本地缓存的 fallback 降级机制
基于本地缓存的 fallback 降级机制Hystrix 出现以下四种情况，都会去调用 fallback 降级机制：断路器处于打开的状态。资源池已满（线程池+队列 / 信号量）。Hystrix 调用各种接口，或者访问外部依赖，比如 MySQL、Redis、Zookeeper、Kafka 等等，出现了任何异常的情况。访问外部依赖的时候，访问时间过长，报了 TimeoutException...
2019-05-14 22:58:39
11033
1
原创 Hystrix(7) 基于 request cache 请求缓存技术优化批量商品数据查询接口
基于 request cache 请求缓存技术优化批量商品数据查询接口Hystrix command 执行时 8 大步骤第三步，就是检查 Request cache 是否有缓存。首先，有一个概念，叫做 Request Context 请求上下文，一般来说，在一个 web 应用中，如果我们用到了 Hystrix，我们会在一个 filter 里面，对每一个请求都施加一个请求上下文。就是说，每一次请...
2019-05-14 22:57:48
10812
原创 Hystrix(6) 深入 Hystrix 执行时内部原理
深入 Hystrix 执行时内部原理前面我们了解了 Hystrix 最基本的支持高可用的技术：资源隔离 + 限流。创建 command；执行这个 command；配置这个 command 对应的 group 和线程池。这里，我们要讲一下，你开始执行这个 command，调用了这个 command 的 execute() 方法之后，Hystrix 底层的执行流程和步骤以及原理是什么。...
2019-05-14 22:56:36
10779
原创 Hystrix(5) Hystrix 隔离策略细粒度控制
Hystrix 隔离策略细粒度控制Hystrix 实现资源隔离，有两种策略：线程池隔离信号量隔离对资源隔离这一块东西，其实可以做一定细粒度的一些控制。execution.isolation.strategy指定了 HystrixCommand.run() 的资源隔离策略：THREAD or SEMAPHORE，一种基于线程池，一种基于信号量。// to use thread is...
2019-05-14 22:54:04
10763
1
原创 Hystrix(4) 基于 Hystrix 信号量机制实现资源隔离
基于 Hystrix 信号量机制实现资源隔离Hystrix 里面核心的一项功能，其实就是所谓的资源隔离，要解决的最最核心的问题，就是将多个依赖服务的调用分别隔离到各自的资源池内。避免说对某一个依赖服务的调用，因为依赖服务的接口调用的延迟或者失败，导致服务所有的线程资源全部耗费在这个服务的接口调用上。一旦说某个服务的线程资源全部耗尽的话，就可能导致服务崩溃，甚至说这种故障会不断蔓延。Hystri...
2019-05-14 22:52:58
10912
原创 Hystrix(3) 基于 Hystrix 线程池技术实现资源隔离
基于 Hystrix 线程池技术实现资源隔离上一讲提到，如果从 Nginx 开始，缓存都失效了，Nginx 会直接通过缓存服务调用商品服务获取最新商品数据（我们基于电商项目做个讨论），有可能出现调用延时而把缓存服务资源耗尽的情况。这里，我们就来说说，怎么通过 Hystrix 线程池技术实现资源隔离。资源隔离，就是说，你如果要把对某一个依赖服务的所有调用请求，全部隔离在同一份资源池内，不会去用其...
2019-05-14 22:43:02
10680
1
原创 Hystrix(2) 电商网站的商品详情页系统架构
电商网站的商品详情页系统架构小型电商网站的商品详情页系统架构小型电商网站的页面展示采用页面全量静态化的思想。数据库中存放了所有的商品信息，页面静态化系统，将数据填充进静态模板中，形成静态化页面，推入 Nginx 服务器。用户浏览网站页面时，取用一个已经静态化好的 html 页面，直接返回回去，不涉及任何的业务逻辑处理。下面是页面模板的简单 Demo 。<html> &...
2019-05-14 22:41:06
10794
原创 Hystrix(1) 用 Hystrix 构建高可用服务架构
参考 Hystrix Home。Hystrix 是什么？在分布式系统中，每个服务都可能会调用很多其他服务，被调用的那些服务就是依赖服务，有的时候某些依赖服务出现故障也是很正常的。Hystrix 可以让我们在分布式系统中对服务间的调用进行控制，加入一些调用延迟或者依赖故障的容错机制。Hystrix 通过将依赖服务进行资源隔离，进而阻止某个依赖服务出现故障时在整个系统所有的依赖服务调用中进行蔓...
2019-05-14 22:38:28
10507
原创 精选(68) 面试官：zookeeper 都有哪些使用场景？
面试题zookeeper 都有哪些使用场景？面试官心理分析现在聊的 topic 是分布式系统，面试官跟你聊完了 dubbo 相关的一些问题之后，已经确认你对分布式服务框架/RPC框架基本都有一些认知了。那么他可能开始要跟你聊分布式相关的其它问题了。分布式锁这个东西，很常用的，你做 Java 系统开发，分布式系统，可能会有一些场景会用到。最常用的分布式锁就是基于 zookeeper 来实现的...
2019-05-14 22:30:49
10467
原创 精选(67) 面试官：dubbo 的 spi 思想是什么？
面试题dubbo 的 spi 思想是什么？面试官心理分析继续深入问呗，前面一些基础性的东西问完了，确定你应该都 ok，了解 dubbo 的一些基本东西，那么问个稍微难一点点的问题，就是 spi，先问问你 spi 是啥？然后问问你 dubbo 的 spi 是怎么实现的？其实就是看看你对 dubbo 的掌握如何。面试题剖析spi 是啥？spi，简单来说，就是 service provid...
2019-05-14 22:28:46
10988
原创 精选(66) 面试官：如何基于 dubbo 进行服务治理、服务降级、失败重试以及超时重试？
面试题如何基于 dubbo 进行服务治理、服务降级、失败重试以及超时重试？面试官心理分析服务治理，这个问题如果问你，其实就是看看你有没有服务治理的思想，因为这个是做过复杂微服务的人肯定会遇到的一个问题。服务降级，这个是涉及到复杂分布式系统中必备的一个话题，因为分布式系统互相来回调用，任何一个系统故障了，你不降级，直接就全盘崩溃？那就太坑爹了吧。失败重试，分布式系统中网络请求如此频繁，要是...
2019-05-14 22:26:52
10327
原创 精选(65) 面试官：dubbo 支持哪些通信协议？支持哪些序列化协议？说一下 Hessian 的数据结构？PB 知道吗？为什么 PB 的效率是最高的？
面试题dubbo 支持哪些通信协议？支持哪些序列化协议？说一下 Hessian 的数据结构？PB 知道吗？为什么 PB 的效率是最高的？面试官心理分析上一个问题，说说 dubbo 的基本工作原理，那是你必须知道的，至少要知道 dubbo 分成哪些层，然后平时怎么发起 rpc 请求的，注册、发现、调用，这些是基本的。接着就可以针对底层进行深入的问问了，比如第一步就可以先问问序列化协议这块，就...
2019-05-14 22:24:31
10326
原创 精选(64) 面试官：如何自己设计一个类似 Dubbo 的 RPC 框架？
面试题如何自己设计一个类似 Dubbo 的 RPC 框架？面试官心理分析说实话，就这问题，其实就跟问你如何自己设计一个 MQ 一样的道理，就考两个：你有没有对某个 rpc 框架原理有非常深入的理解。你能不能从整体上来思考一下，如何设计一个 rpc 框架，考考你的系统设计能力。面试题剖析其实问到你这问题，你起码不能认怂，因为是知识的扫盲，那我不可能给你深入讲解什么 kafka 源码...
2019-05-14 22:22:10
11071
原创 精选(63) 面试官：说一下的 dubbo 的工作原理？注册中心挂了可以继续通信吗？说说一次 rpc 请求的流程？
面试题说一下的 dubbo 的工作原理？注册中心挂了可以继续通信吗？说说一次 rpc 请求的流程？面试官心理分析MQ、ES、Redis、Dubbo，上来先问你一些思考性的问题、原理，比如 kafka 高可用架构原理、es 分布式架构原理、redis 线程模型原理、Dubbo 工作原理；之后就是生产环境里可能会碰到的一些问题，因为每种技术引入之后生产环境都可能会碰到一些问题；再来点综合的，就是...
2019-05-14 22:20:45
11344
原创 精选(62) 面试官：dubbo 负载均衡策略和集群容错策略都有哪些？动态代理策略呢？
面试题dubbo 负载均衡策略和集群容错策略都有哪些？动态代理策略呢？面试官心理分析继续深问吧，这些都是用 dubbo 必须知道的一些东西，你得知道基本原理，知道序列化是什么协议，还得知道具体用 dubbo 的时候，如何负载均衡，如何高可用，如何动态代理。说白了，就是看你对 dubbo 熟悉不熟悉：dubbo 工作原理：服务注册、注册中心、消费者、代理通信、负载均衡；网络通信、序列化...
2019-05-14 22:19:01
10831
原创 精选(61) 面试官：分布式事务了解吗？
面试题分布式事务了解吗？你们是如何解决分布式事务问题的？面试官心理分析只要聊到你做了分布式系统，必问分布式事务，你对分布式事务一无所知的话，确实会很坑，你起码得知道有哪些方案，一般怎么来做，每个方案的优缺点是什么。现在面试，分布式系统成了标配，而分布式系统带来的分布式事务也成了标配了。因为你做系统肯定要用事务吧，如果是分布式系统，肯定要用分布式事务吧。先不说你搞过没有，起码你得明白有哪几种...
2019-05-14 22:17:04
10822
原创 精选(60) 面试官：分布式服务接口请求的顺序性如何保证？
面试题分布式服务接口请求的顺序性如何保证？面试官心理分析其实分布式系统接口的调用顺序，也是个问题，一般来说是不用保证顺序的。但是有时候可能确实是需要严格的顺序保证。给大家举个例子，你服务 A 调用服务 B，先插入再删除。好，结果俩请求过去了，落在不同机器上，可能插入请求因为某些原因执行慢了一些，导致删除请求先执行了，此时因为没数据所以啥效果也没有；结果这个时候插入请求过来了，好，数据插入进去...
2019-05-14 22:13:12
10896
原创 精选(59) 分布式系统面试连环炮
分布式系统面试连环炮有一些同学，之前呢主要是做传统行业，或者外包项目，一直是在那种小的公司，技术一直都搞的比较简单。他们有共同的一个问题，就是都没怎么搞过分布式系统，现在互联网公司，一般都是做分布式的系统，大家都不是做底层的分布式系统、分布式存储系统 hadoop hdfs、分布式计算系统 hadoop mapreduce / spark、分布式流式计算系统 storm。分布式业务系统，就是把...
2019-05-14 22:11:19
10634
原创 精选(58) 面试官：分布式服务接口的幂等性如何设计（比如不能重复扣款）？
面试题集群部署时的分布式 session 如何实现？面试官心理分析面试官问了你一堆 dubbo 是怎么玩儿的，你会玩儿 dubbo 就可以把单块系统弄成分布式系统，然后分布式之后接踵而来的就是一堆问题，最大的问题就是分布式事务、接口幂等性、分布式锁，还有最后一个就是分布式 session。当然了，分布式系统中的问题何止这么一点，非常之多，复杂度很高，这里只是说一下常见的几个问题，也是面试的...
2019-05-14 22:08:28
10581
原创 精选(57) 面试官：集群部署时的分布式 session 如何实现
面试题集群部署时的分布式 session 如何实现？面试官心理分析面试官问了你一堆 dubbo 是怎么玩儿的，你会玩儿 dubbo 就可以把单块系统弄成分布式系统，然后分布式之后接踵而来的就是一堆问题，最大的问题就是分布式事务、接口幂等性、分布式锁，还有最后一个就是分布式 session。当然了，分布式系统中的问题何止这么一点，非常之多，复杂度很高，这里只是说一下常见的几个问题，也是面试的...
2019-05-14 22:06:55
10779
原创 精选(56) 面试官：一般实现分布式锁都有哪些方式
面试题一般实现分布式锁都有哪些方式？使用 redis 如何设计分布式锁？使用 zk 来设计分布式锁可以吗？这两种分布式锁的实现方式哪种效率比较高？面试官心理分析其实一般问问题，都是这么问的，先问问你 zk，然后其实是要过度到 zk 关联的一些问题里去，比如分布式锁。因为在分布式系统开发中，分布式锁的使用场景还是很常见的。面试题剖析redis 分布式锁官方叫做 RedLock 算法，是 ...
2019-05-14 22:05:11
10457
window10 redis集群安装所需资源 Redis-x64-3.2.100.zip 、rubyinstaller-2.3.3-x64.exe 、redis
2020-07-11
centos6阿里云rabbitmq安装
2018-04-21
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人