- 博客(41)
- 收藏
- 关注
RSS订阅原创 Zookeeper经典应用场景实战
而一旦流量洪峰过去了，就需要下线大量的节点。在 Curator 中，可以使用 create 函数创建数据节点，并通过 withMode 函数指定节点类型（持久化节点，临时节点，顺序节点，临时顺序节点，持久化顺序节点等），默认是持久化节点，之后调用 forPath 函数来指定节点的路径和数据信息。5.MongoDb的ObjectId:MongoDB是一个分布式的非结构化NoSQL数据库，每插入一条记录会自动生成全局唯一的一个“_id”字段值，它是一个12字节的字符串，可以作为分布式系统中全局唯一的ID。
2023-10-11 23:43:55
563
1
原创 Zookeeper特性与节点数据类型详解
ZooKeeper 是一个开源的分布式协调框架，是Apache Hadoop 的一个子项目，主要用来解决分布式集群中应用系统的一致性问题。Zookeeper 的设计目标是将那些复杂且容易出错的分布式一致性服务封装起来，构成一个高效可靠的原语集，并以一系列简单易用的接口提供给用户使用。官方：https://zookeeper.apache.org/ZooKeeper本质上是一个分布式的小文件存储系统（Zookeeper=文件系统+监听机制）。
2023-10-10 00:24:39
456
原创 Redis缓存设计与性能优化
由于缓存层承载着大量请求， 有效地保护了存储层， 但是如果缓存层由于某些原因不能提供服务(比如超大并发过来，缓存层支撑不住，或者由于缓存设计不好，类似大量请求访问bigkey，导致缓存能支撑的并发急剧下降)， 于是大量请求都会打到存储层， 存储层的调用量会暴增， 造成存储层也会级联宕机的情况。如果系统启动完马上就会有很多的请求过来，那么可以给redis连接池做预热，比如快速的创建一些redis连接，执行简单命令，类似ping()，快速的将连接池里的空闲连接提升到minIdle的数量。
2023-09-11 18:00:22
72
原创 Redis缓存高可用集群
当客户端向一个错误的节点发出了指令，该节点会发现指令的 key 所在的槽位并不归自己管理，这时它会向客户端发送一个特殊的跳转指令携带目标操作的节点地址，告诉客户端去连这个节点去获取数据。奇数个master节点可以在满足选举该条件的基础上节省一个节点，比如三个master节点和四个master节点的集群相比，大家如果都挂了一个master节点都能选举新master节点，如果都挂了两个master节点都没法选举新master节点了，所以奇数的master节点更多的是从节省机器资源角度出发说的。
2023-09-06 18:13:42
55
原创 Redis持久化、主从与哨兵架构详解
如果master进程id变化了，或者从节点数据下标offset太旧，已经不在master的缓存队列里了，那么将会进行一次全量数据的复制。如果开启了混合持久化，AOF在重写时，不再是单纯将内存数据转换为RESP命令写入AOF文件，而是将重写这一刻之前的内存做RDB快照处理，并且将RDB快照内容和增量的AOF修改内存数据的命令存在一起，都写入新的AOF文件，新的文件一开始不叫appendonly.aof，等到重写完新的AOF文件才会进行改名，覆盖原有的AOF文件，完成新旧两个AOF文件的替换。
2023-09-05 17:51:51
45
原创 Redis核心数据结构与高性能原理
scan 参数提供了三个参数，第一个是 cursor 整数值(hash桶的索引值)，第二个是 key 的正则模式，第三个是一次遍历的key的数量(参考值，底层遍历的数量不一定)，并不是符合条件的结果数量。注意：但是scan并非完美无瑕， 如果在scan的过程中如果有键的变化（增加、 删除、 修改） ，那么遍历效果可能会碰到如下问题： 新增的键可能没有遍历到， 遍历出了重复的键等情况， 也就是说scan并不能保证完整的遍历出来所有的键， 这些是我们在开发时需要考虑的。Stats 通用统计数据。
2023-09-04 22:13:00
32
原创 Spring之AOP底层源码解析（下）
DefaultAdvisorAutoProxyCreator的父类是AbstractAdvisorAutoProxyCreator。非常强大以及重要，只要Spring容器中存在这个类型的Bean，就相当于开启了AOP，AbstractAdvisorAutoProxyCreator实际上就是一个BeanPostProcessor，所以在创建某个Bean时，就会进入到它对应的生命周期方法中，比如：在某个Bean初始化之后。
2023-08-28 16:57:25
25
原创 Spring之AOP底层源码解析（上）
上面介绍了Spring中所提供了ProxyFactory、Advisor、Advice、PointCut等技术来实现代理对象的创建，但是我们在使用Spring时，我们并不会直接这么去使用ProxyFactory，比如说，我们希望ProxyFactory所产生的代理对象能直接就是Bean，能直接从Spring容器中得到UserSerivce的代理对象，而这些，Spring都是支持的，只不过，作为开发者的我们肯定得告诉Spring，那些类需要被代理，代理逻辑是什么。
2023-08-28 16:47:24
29
原创 Spring之循环依赖底层源码解析
很简单，就是A对象依赖了B对象，B对象依赖了A对象。// A依赖了Bclass A{public B b;// B依赖了Aclass B{public A a;那么循环依赖是个问题吗？如果不考虑Spring，循环依赖并不是问题，因为对象之间相互依赖是很正常的事情。比如a.b = b;b.a = a;这样，A,B就依赖上了。但是，在Spring中循环依赖就是一个问题了，为什么？
2023-08-28 16:33:31
22
原创 Spring之依赖注入源码解析上
方法参数个数为0个，并且 （方法名字以"get"开头 或者 方法名字以"is"开头并且方法的返回类型为boolean）**set方法的定义是：**方法参数个数为1个，并且 （方法名字以"set"开头并且方法返回类型为void）
2023-08-22 15:36:59
35
原创 Spring之Bean生命周期源码解析下
但是我们在定义一个Bean时，如果这个Bean实现了DisposableBean接口，或者实现了AutoCloseable接口，或者在BeanDefinition中指定了destroyMethodName，那么这个Bean都属于“DisposableBean”，这些Bean在容器关闭时都要调用相应的销毁方法。在销毁时，Spring会找出实现了DisposableBean接口的Bean。Bean销毁是发送在Spring容器关闭过程中的。这里涉及到一个设计模式：适配器模式。
2023-08-20 22:51:12
27
原创 Spring之底层架构核心概念
BeanDefinition表示Bean定义，BeanDefinition中存在很多属性用来描述一个Bean的特点。比如：在Spring中，我们经常会通过以下几种方式来定义Bean：我们还可以编程式定义Bean，那就是直接通过BeanDefinition，比如：我们还可以通过BeanDefinition设置一个Bean的其他属性和申明式事务、编程式事务类似，通过<bean/>，@Bean，@Component等申明式方式所定义的Bean，最终都会被Spring解析为对应的BeanDefinition对象
2023-08-15 17:23:16
27
原创 Spring底层核心原理
Spring事务是否会失效的判断标准：某个加了@Transactional注解的方法被调用时，要判断到底是不是直接被代理对象调用的，如果是则事务会生效，如果不是则失效。AOP就是进行动态代理，在创建一个Bean的过程中，Spring在最后一步会去判断当前正在创建的这个Bean是不是需要进行AOP，如果需要则会进行动态代理。需要重视的是，如果Spring选择了一个有参的构造方法，Spring在调用这个有参构造方法时，需要传入参数，那这个参数是怎么来的呢？在Java语言中，肯定是根据某个类来创建一个对象的。
2023-08-13 20:38:22
34
原创 深入理解并发可见性、有序性、原子性与JMM内存模型
Java中的volatile关键字可以保证多线程操作共享变量的可见性以及禁止指令重排序，synchronized关键字不仅保证可见性，同时也保证了原子性（互斥性）。在更底层，JMM通过内存屏障来实现内存的可见性以及禁止重排序。为了程序员的方便理解，提出了happens-before，它更加的简单易懂，从而避免了程序员为了理解内存可见性而去学习复杂的重排序规则以及这些规则的具体实现方法。
2023-08-09 17:19:43
37
原创 线程池ForkJoinPool实战及其工作原理
*归并排序（Merge Sort）是一种基于分治思想的排序算法。**归并排序的基本思想是将一个大数组分成两个相等大小的子数组，对每个子数组分别进行排序，然后将两个子数组合并成一个有序的大数组。因为常常使用递归实现(由先拆分后合并的性质决定的)，所以我们称其为归并排序。将数组分成两个子数组对每个子数组进行排序合并两个有序的子数组归并排序的时间复杂度为O(nlogn)，空间复杂度为O(n)，其中n为数组的长度。分治思想是。
2023-08-07 17:43:13
140
原创 线程池ThreadPoolExecutor底层原理源码下
所以，只需要使用一个Integer数字的最高三个bit，就可以表示5种线程池的状态，而剩下的29个bit就可以用来表示工作线程数，比如，假如ctl为：11100000 00000000 00000000 00001010，就表示线程池的状态为RUNNING，线程池中目前在工作的线程有10个，这里说的“在工作”意思是线程活着，要么在执行任务，要么在阻塞等待任务。到此，线程池中的所有核心方法的源码都分析一遍，自我感觉良好，不知道你啥感觉，哈哈，希望你能看懂，看不懂的欢迎交流。
2023-08-04 15:49:22
40
原创 线程池ThreadPoolExecutor底层原理源码上
Tomcat中用的线程池为org.apache.tomcat.util.threads.ThreadPoolExecutor，注意类名和JUC下的一样，但是包名不一样。入队时，如果线程池的线程个数等于最大线程池数才入队入队时，如果线程池的线程个数小于最大线程池数，会返回false，表示入队失败仍然会先判断线程个数是否小于核心线程数，如果小于则创建线程如果等于核心线程数，会入队，但是线程个数小于最大线程数会入队失败，从而会去创建线程。
2023-08-03 16:37:43
38
原创 阻塞队列BlockingQueue
是限定在一端进行插入，另一端进行删除的特殊线性表。先进先出(FIFO)线性表。允许出队的一端称为队头，允许入队的一端称为队尾。数据结构演示网站：https://www.cs.usfca.edu/~galles/visualization/Algorithms.htmlQueue接口//添加一个元素，添加成功返回true, 如果队列满了，就会抛出异常 boolean add(E e);//添加一个元素，添加成功返回true, 如果队列满了，返回false boolean offer(E e);
2023-08-02 14:08:43
37
原创 ReentrantLock源码
java.util.concurrent包中的大多数同步器实现都是围绕着共同的基础行为，比如等待队列、条件队列、独占获取、共享获取等，而这些行为的抽象就是基于AbstractQueuedSynchronizer（简称AQS）实现的，AQS是一个抽象同步框架，可以用来实现一个依赖状态的同步器。
2023-08-01 21:49:50
23
原创 JUC并发工具类
解决多线程竞争资源的问题，例如多个线程同时对同一个数据库进行写操作，可以使用ReentrantLock保证每次只有一个线程能够写入。实现多线程任务的顺序执行，例如在一个线程执行完某个任务后，再让另一个线程执行任务。实现多线程等待/通知机制，例如在某个线程执行完某个任务后，通知其他线程继续执行任务。限流：Semaphore可以用于限制对共享资源的并发访问数量，以控制系统的流量。资源池：Semaphore可以用于实现资源池，以维护一组有限的共享资源。
2023-07-31 17:41:41
37
1
原创 并发编程之CAS&Atomic原子操作
什么是原子性？相信很多同学在工作中经常使用事务，事务的一大特性就是原子性（事务具有ACID四大特性），一个事务包含多个操作，这些操作要么全部执行，要么全都不执行。并发里的原子性和原子操作是一样的内涵和概念，假定有两个操作A和B都包含多个步骤，如果从执行A的线程来看，当另一个线程执行B时，要么将B全部执行完，要么完全不执行B，执行B的线程看A的操作也是一样的，那么A和B对彼此来说是原子的。
2023-07-24 14:21:06
79
原创 ThreadLocal
JVM利用设置ThreadLocalMap的Key为弱引用，来避免内存泄露。JVM利用调用remove、get、set方法的时候，回收弱引用。当ThreadLocal存储很多Key为null的Entry的时候，而不再去调用remove、get、set方法，那么将导致内存泄漏。使用线程池+ ThreadLocal时要小心，因为这种情况下，线程是一直在不断的重复运行的，从而也就造成了value可能造成累积的情况。
2023-07-20 15:39:08
35
1
原创 并发、线程与等待通知机制
安全的中止则是其他线程通过调用某个线程 A 的 **interrupt()**方法对其进行中断操作, 中断好比其他线程对该线程打了个招呼，“A，你要中断了”，不代表线程 A 会立即停止自己的工作，同样的 A 线程完全可以不理会这种中断请求。只有执行了 start()方法后，才实现了真正意义上的启动线程。一个 Java 程序从 main()方法开始执行，然后按照既定的代码逻辑执行，看似没有其他线程参与，但实际上 Java 程序天生就是多线程程序，因为执行 main()方法的是一个名称为 main 的线程。
2023-07-12 13:45:42
88
1
原创 JVM调优实战及常量池
s0还是常量池 中"zhuge”的引用，s1因为无法在编译期确定，所以是运行时创建的新对象”zhuge”的引用，s2因为有后半部分 new String(”ge”)所以也无法在编译期确定，所以也是一个新创建对象”zhuge”的引用;在编译期其字符串常量的值就确定下来，故上面程序最终的结果都为true。分析：JVM对于字符串引用，由于在字符串的"+“连接中，有字符串引用存在，而引用的值在程序编译期是无法确定的，即"a” + bb无法被编译器优化，只有在程序运行期来动态分配并将连接后的新地址赋给b。
2023-07-10 15:59:46
37
1
原创 垃圾收集器G1&ZGC
XX:G1HeapWastePercent(默认5%): gc过程中空出来的region是否充足阈值，在混合回收的时候，对Region回收都是基于复制算法进行的，都是把要回收的Region里的存活对象放入其他Region，然后这个Region中的垃圾对象全部清理掉，这样的话在回收过程就会不断空出来新的Region，一旦空闲出来的Region数量达到了堆内存的5%，此时就会立即停止混合回收，意味着本次混合回收就结束了。ZGC的停顿时间是在10ms以下，但是ZGC的执行时间还是远远大于这个时间的。
2023-07-10 14:17:27
63
1
原创 垃圾收集器ParNew&CMS与底层三色标记算法
我的理解：SATB相对增量更新效率会高(当然SATB可能造成更多的浮动垃圾)，因为不需要在重新标记阶段再次深度扫描被删除引用对象，而CMS对增量引用的根对象会做深度扫描，G1因为很多对象都位于不同的region，CMS就一块老年代区域，重新深度扫描对象的话G1的代价会比CMS高，所以G1选择SATB不深度扫描对象，只是简单标记，等到下一轮GC再深度扫描。而老年代的对象存活几率是比较高的，而且没有额外的空间对它进行分配担保，所以我们必须选择“标记-清除”或“标记-整理”算法进行垃圾收集。
2023-07-05 14:53:15
50
原创 JVM对象创建与内存分配机制
很显然test1方法中的user对象被返回了，这个对象的作用域范围不确定，test2方法中的user对象我们可以确定当方法结束这个对象就可以认为是无效对象了，对于这样的对象我们其实可以将其分配在栈内存里，让其在方法结束时跟随栈内存一起被回收掉。我们通过JVM内存分配可以知道JAVA中的对象都是在堆上进行分配，当对象没有被引用的时候，需要依靠GC进行回收内存，如果对象数量较多的时候，会给GC带来较大压力，也间接影响了应用的性能。中去，老年代上的空间足够存放allocation1，所以不会出现Full GC。
2023-07-03 17:56:59
234
1
原创 JVM内存模型深度剖析与优化
如果释放了很少的空间， 那么在不超过-XX：MaxMetaspaceSize（如果设置了的话） 的情况下， 适当提高该值。由于调整元空间的大小需要Full GC，这是非常昂贵的操作，如果应用在启动的时候发生大量Full GC，通常都是由于永久代或元空间发生了大小调整，基于这种情况，一般建议在JVM参数中将MetaspaceSize和MaxMetaspaceSize设置成一样的值，并设置得比初始值要大，对于8G物理内存的机器来说，一般我会将这两个值都设置为256M。代表永久代的初始容量。
2023-06-28 17:22:29
114
1
原创 JVM类加载机制
自定义类加载器只需要继承 java.lang.ClassLoader 类，该类有两个核心方法，一个loadClass(String, boolean)，实现了双亲委派机制，还有一个方法是findClass，默认实现是空方法，所以我们自定义类加载器主要是重写findClass方法。try {//defineClass将一个字节数组转为Class对象，这个字节数组是class文件读取后最终的字节数组。//实现类加载 } catch(Exception e) {
2023-06-27 13:40:16
60
1
原创 Mysql全局优化及Mysql8.0新特性
从上图可以看出SQL及索引的优化效果是最好的，而且成本最低，所以工作中我们要在这块花更多时间。CPU：32核内存：64G下面参数都是服务端参数，默认在配置文件的 [mysqld] 标签下连接的创建和销毁都需要系统资源，比如内存、文件句柄，业务说的支持多少并发，指的是每秒请求数，也就是QPS。一个连接最少占用内存是256K，最大是64M，如果一个连接的请求数据超过64MB（比如排序），就会申请临时空间，放到硬盘上。如果3000个用户同时连上mysql，最小需要内存3000。
2023-06-25 13:27:38
478
原创 Innodb底层原理与Mysql日志
如果要恢复大量数据，比如程序员经常说的删库跑路的话题，假设我们把数据库所有数据都删除了要怎么恢复了，如果数据库之前没有备份，所有的binlog日志都在的话，就从binlog第一个文件开始逐个恢复每个binlog文件里的数据，这种一般不太可能，因为binlog日志比较大，早期的binlog文件会定期删除的，所以一般不可能用binlog文件恢复整个数据库的。key 是查询的语句，value 是查询的结果。你可以看到，如果查询命中缓存，MySQL 不需要执行后面的复杂操作，就可以直接返回结果，这个效率会很高。
2023-06-25 10:44:25
75
1
原创 Mysql锁机制与优化实践以及MVCC底层原理剖析
MyISAM在执行查询语句SELECT前，会自动给涉及的所有表加读锁，在执行update、insert、delete操作会自动给涉及的表加写锁。InnoDB在执行查询语句SELECT时(非串行隔离级别)，不会加锁。但是update、insert、delete操作会加行锁。另外，读锁会阻塞写，但是不会阻塞读。而写锁则会把读和写都阻塞。
2023-06-20 16:55:52
87
1
原创 Mysql事务原理与优化
我们的数据库一般都会并发执行多个事务，多个事务可能会并发的对相同的一批数据进行增删改查操作，可能就会导致我们说的脏写、脏读、不可重复读、幻读这些问题。这些问题的本质都是数据库的多事务并发问题，为了解决多事务并发问题，数据库设计了事务隔离机制、锁机制、MVCC多版本并发控制隔离机制、日志机制，用一整套机制来解决多事务并发问题。接下来的，我们会深入讲解这些机制，让大家彻底理解数据库内部的执行原理。
2023-06-19 16:35:40
396
原创 Mysql索引优化二
发现并没有使用 name 字段的索引（key 字段对应的值为 null），具体原因：扫描整个索引并查找到没索引 的行(可能要遍历多个索引树)的成本比扫描全表的成本更高，所以优化器放弃使用索引。其实关键是让排序时返回的字段尽可能少，所以可以让排序和分页操作先查出主键，然后根据主键查到对应的记录，SQL 改写如下。两条 SQL 的结果并不一样，因此，如果主键不连续，不能使用上面描述的优化方法。原 SQL 使用的是 filesort 排序，而优化后的 SQL 使用的是索引排序。查询的结果是一致的。
2023-06-17 23:47:05
35
1
原创 Mysql索引优化一
1、MySQL支持两种方式的排序filesort和index，Using index是指MySQL扫描索引本身完成排序。index效率高，filesort效率低。2、order by满足两种情况会使用Using index。a. order by语句使用索引最左前列。b. 使用where子句与order by子句条件列组合满足索引最左前列。3、尽量在索引列上完成排序，遵循索引建立（索引创建的顺序）时的最左前缀法则。
2023-06-16 18:00:06
51
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人