java并发编程的艺术-学习-2

最新推荐文章于 2022-03-16 17:46:01 发布

魔道祖师^_^

最新推荐文章于 2022-03-16 17:46:01 发布

阅读量161

点赞数

分类专栏：多线程

本文链接：https://blog.csdn.net/tianmzh/article/details/97951087

版权

多线程专栏收录该内容

7 篇文章 0 订阅

订阅专栏

并发编程的艺术-学习

第二章 Java并发机制的底层实现原理

第二章 Java并发机制的底层实现原理

Java代码在编译后会变成java字节码，字节码被类加载器加载到JVM里，JVM执行字节码，最终需要转化为汇编指令在CPU上执行，Java中所使用的并发机制依赖于JVM的实现和CPU的指令。

2.1 Volatile的应用

在多线程并发编程中synchronized和volatile都扮演着重要角色，volatile是轻量级的synchronized，它在多处理器开发中保证了共享变量的“可见性”。可见性的意思是当一个线程修改一个共享变量时，另外一个线程能读到这个修改的值。如果volatile变量修饰符使用恰当的话，它比synchronized的使用和执行成本更低，因为它不会引起线程上下文的切换和调度。

2.1.1 Volatile的定义与实现原理

Java语言规范定义：为确保共享变量能被准确和一致的更新，线程应该确保通过排他锁单独获得这个变量。Java语言提供了volatile，在某些情况下比锁更方便。若一个字段被声明成volatile，java线程内存模型确保所有线程看到这个变量的值是一致的。

1、CPU术语

术语	英文单词	术语描述
内存屏障		是一组处理器指令，用于实现对内存操作的限制
缓冲行		缓存中科院分配的最小存储单位。处理器在填写缓存线时会加载整个缓存线，需要使用多个主内存读周期
原子操作	atomic operations	不可中断的一个或一系列操作
缓存行填充		当处理器识别到从内存中读取操作数是可缓存的，处理器读取整个缓存行到适当的缓存（L1，L2，L3的或所有）（疑问：不懂L1-3啥意思）
缓存命中		如果进行高速缓存行填充操作的内存位置仍然是下次处理器访问的地址时，处理器从缓存中读取操作数，而不是从内存中读取
写命中		当处理器将操作数写回到一个内存缓存的区域时，它首先会检查这个缓存的内存地址是否在缓存中，如果存在一个有效的缓存行，则处理器将这个操作数写回到缓存，而不是写回到内存，这个操作被称为写命中
写缺少		一个有效的缓存行被写入到不存在的内存区域

2、volatile如何实现可见性？

有volatile修饰的共享变量进行写操作的时候会多出汇编代码，Lock前缀的指令在多核处理器下会引发两件事：
（1）将当前处理器缓存行的数据写回到系统内存
（2）这个写回内存的操作会使在其他CPU里缓存了该内存地址的数据无效。
为提高处理速度，处理器不直接和内存进行通信，而是先将系统内存的数据读到内部缓存（L1，L2或其他）后再进行操作，但操作完不知何时会写到内存。如果对声明了volatile的变量进行写操作，JVM就会向处理器发送一条Lock前缀的指令，将这个变量所在缓存行的数据写回到系统内存。但是，就算写回到内存，如果其他处理器缓存的值还是旧的，再执行计算操作就会有问题。所以，在多处理器下，为了保证各个处理器的缓存是一致的，就会实现缓存一致性协议，每个处理器通过嗅探在总线上传播的数据来检查自己缓存的值是不是过期了，当处理器发现自己缓存行对应的内存地址被修改，就会将当前处理器的缓存行设置成无效状态，当处理器对这个数据进行修改操作的时候，会重新从系统内存中把数据读到处理器缓存里。

在这里插入图片描述

3、volatile的两条实现原则：

（1） Lock前缀指令会引起处理器缓存回写到内存。

Lock前缀指令导致在执行指令期间，声言处理器的LOCK#信号。在多处理器环境中，LOCK#信号确保在声言该信号期间，处理器可以独占任何共享内存。但是，在最近的处理器里，LOCK#信号一般不锁总线，而是锁缓存，毕竟锁总线的开销比较大。对于Intel486和Pentium处理器，在锁操作时，总是在总线上声言LOCK#信号。但在P6和目前的处理器中，如果访问的内存区域已经缓存在处理器内部，则不会声言LOCK#信号。相反它会锁定这块内存区域的缓存并回写到内存，并使用缓存一致性机制来确保修改的原子性，此操作被称为“缓存锁定”，缓存一致性机制会阻止同时修改由两个以上处理器的内存区域数据。

（2）一个处理器的缓存回写到内存会导致其他处理器的缓存无效。

IA-32处理器和Intel64处理器使用MESI（修改、独占、共享、无效）控制协议去维护内存缓存和其他处理器缓存的一致性。在多核处理器系统中进行操作的时候，IA-32和Intel64处理器能嗅探其他处理器访问系统内存和它们的内部缓存。处理器使用嗅探技术保证它的内部缓存系统内存和其他处理器的缓存的数据在总线上保持一致。例如，在Petium和P6 family处理器中，如果通过嗅探一个处理器来检测其他处理器打算写内存地址，而这个地址当前处于共享状态，那么正在嗅探的处理器将使它的缓存行无效，在下次访问相同内存地址时，强制执行缓存行填充。

2.1.2 Volatile的使用优化

LinkedTransferQueue在使用volatile变量时，用一种追加字节的方式来优化出队和入队的性能。

	// 队列中的头部节点
    private transient final PaddedAtomicReference<QNode> head;
    // 队列中的尾部节点
    private transient final PaddedAtomicReference<QNode> tail;

    static final class PaddedAtomicReference<T> extends AtomicReference T>

    {
        // 使用很多个4个字节的引用追加到64个字节
        Object p0, p1, p2, p3, p4, p5, p6, p7, p8, p9, pa, pb, pc, pd, pe;
        PaddedAtomicReference(T r) {
        super(r);
    }
    }

    public class AtomicReference<V> implements Serializable {
        private volatile V value;
        // 省略其他代码
    }

追加字节能优化性能？

  与处理器架构相关。LinkedTransferQueque使用一个内部类的类型来定义队列的头结点（head）和尾节点（tail），而这个内部类PaddedAtomicReference相对于父类AtomicReference只做了一件事，就是将共享变量追加到64字节。一个对象引用占4字节，追加了15个变量（共占60字节），再加上父类的value变量，一共64字节。

追加到64字节能提高并发编程效率？

因为对于英特尔酷睿i7、酷睿、Atom和NetBurst，以及Core Solo和Pentium M处理器的L1、L2或L3缓存的高速缓存行是64个字节宽，不支持部分填充缓存行，这意味着，如果队列的头节点和尾节点都不足64字节的话，处理器会将它们都读到同一个高速缓存行中，在多处理器下每个处理器都会缓存同样的头、尾节点，当一个处理器试图修改头节点时，会将整个缓存行锁定，那么缓存在一致性机制的作用下，会导致其他处理器不能访问自己高速缓存中的尾节点，而队列的入队和出队操作则需要不停修改头节点和尾节点，所以在多处理器的情况下将会严重影响到队列的入队和出队效率。

使用追加到64字节的方式来填满高速缓冲区的缓存行，避免头节点和尾节点加载到同一个缓存行，使头、尾节点在修改时不会互相锁定。

不适用：

 缓存行非64字节宽的处理器。
 共享变量不会被频繁的写。

   因为使用追加字节的方式需要处理器读取更多的字节到高速缓冲区，这本身会带来一定的性能消耗，如果共享变量不被频繁写，锁的几率会非常小，没必要通过追加字节的方式来避免互相锁定。
  
这种追加方式在Java7下可能不生效，它淘汰或重新排列无用字段。

2.2 synchronized的实现原理与应用

synchronized实现同步的基础：java中每一个对象都可以作为锁。（不懂，与JVM有关）
-对于普通同步方法，锁是当前实例对象
-对于静态同步方法，锁是当前类的Class对象
-对于同步方法块，锁是Synchronized括号里配的对象

当一个线程视图访问同步代码块时，它首先必须得到锁，退出或抛出异常时必须释放锁。
从JVM规范中看到Synchronized在JVM里的实现原理，JVM基于进入和退出Monitor对象来实现方法同步和代码块同步，但两者的实现细节不一样。代码块同步是使用monitorenter和monitorexit指令实现的，而方法同步是使用另外一种方式实现的，细节在JVM规范里没有详细说明。但是，方法的同步同样可以使用这两个指令来实现。
monitorenter指令是在编译后插入到同步代码块的开始位置，而monitorexit是插入到方法结束处和异常处，JVM要保证每个monitorenter必须有对应的monitorexit与之配对。任何对象都有一个monitor与之关联，当一个monitor被持有后，它将处于锁定状态。线程执行到monitorenter指令时，将会尝试获取对象所对应的monitor的所有权，即尝试获得对象的锁。

2.2.1 Java对象头

synchronized用的锁是存在java对象头里的。（不懂，为什么）
如果对象是数组类型，则虚拟机用3个字宽（Word）存储对象头，如果对象是非数组类型，则用2字宽存储对象头。在32位虚拟机中，1字宽=4字节，即32bit。

长度	内容	说明
32/64bit	Mark Word	存储对象的hashCode或锁信息等
32/64bit	Class Metadata Address	存储到对象类型数据的指针
32/64bit	Array length	数组的长度（如果当前对象是数组）

Java对象头里的Mark Word里默认存储对象的HashCode、分代年龄和锁标记位。

32位JVM的Mark Word默认存储结构如下：

锁状态	25bit	4 bit	1bit 是否是偏向锁	2bit 锁标志位
无锁状态	对象的hashCode	对象分代年龄	0	01

运行期间，Mark Word里存储的数据会随着锁标志的变化而变化。Mark Word可能变化为存储以下4种数据
在这里插入图片描述
64位JVM的Mark Word存储结构如下：

2.2.2 锁的升级与对比

Java SE 1.6为减少获得锁和释放锁带来的性能消耗，引入了“偏向锁”和“轻量级锁”，在Java SE 1.6中，锁一共有4种状态，级别从低到高一次是：无锁状态、偏向锁状态、轻量级锁状态、重量级锁状态。这几个状态随着竞争情况逐渐升级。锁可以升级，但不能降级，目的是为了提高获得锁和释放锁的效率。

偏向锁

研究发现多数情况下，锁不仅不存在多线程竞争，而且总是由同一线程多次获得，为了让线程获得锁的代价更低而引入了偏向锁。当一个线程访问同步块并获取锁时，会在对象头和栈帧中的锁记录里存储偏向的线程ID，以后该线程在进入和退出同步块时不需要进行CAS操作来增加锁和解锁，只需要简单地测试一下对象头的Mark Word里是否存储着指向当前线程的偏向锁。如果测试成功，表示线程已经获得锁。如果测试失败，则需要再测试一下Mark Word里偏向锁的标志是否设置成1；如果没有设置，则使用CAS竞争锁；如果设置了，则尝试使用CAS将对象头的偏向锁指向当前线程。

在这里插入图片描述
（1）偏向锁的撤销

偏向锁使用了一种等到竞争出现才释放锁的机制，所以当其他线程尝试竞争偏向锁时，持有偏向锁的线程才会释放锁。偏向锁的撤销，需要等待全局安全点（在这个时间点上没有正在执行的字节码）。它会首先暂停拥有偏向锁的线程，然后检查持有偏向锁的线程是否活着，如果线程不处于活动状态，则将对象头设置成无锁状态；如果线程仍然活着，拥有偏向锁的栈会被执行，遍历偏向对象的锁记录，栈中的锁记录和对象头的Mark Word要么重新偏向于其他线程，要么恢复到无锁或者标记对象不适合作为偏向锁，最后唤醒暂停的线程。

在这里插入图片描述
(2)关闭偏向锁

偏向锁在Java6和Java 7里是默认启用的，但是它在程序启动几秒钟之后才激活，如有必要可以使用JVM参数来关闭延迟： -XX:BiasedLockingStartupDelay=0。如果确定应用程序里所有的锁通常情况下处于竞争状态，可以通过JVM参数关闭偏向锁：-XX:-UseBiasedLocking=false，那么程序默认会进入轻量级锁状态。

轻量级锁

（1）轻量级锁加锁
线程在执行同步块之前，JVM会先在当前线程的栈帧中创建用于存储锁记录的空间，并将对象头中的Mark Word复制到锁记录中，官方称Displaced Mark Word。然后线程尝试使用CAS将对象头的Mark Word替换为指向锁记录的指针。如果替换成功，当前线程获得锁，如果失败，表示其他线程竞争锁，当前线程便尝试使用自旋来获取锁。
（2）轻量级锁解锁
轻量级锁解锁时，会使用原子的CAS操作将Displaced Mark Word替换回到对象头，如果替换成功，则表示没有竞争发生。如果失败，表示当前锁存在竞争，锁就会膨胀成重量级锁。
在这里插入图片描述

    自旋会消耗CPU，为了避免无用的自旋（比如获得锁的线程被阻塞了），一旦锁升级成重量级锁，就不会再恢复到轻量级锁状态。当锁处于这个状态下，其他线程视图获取锁时，都会被阻塞住，当持有锁的线程释放锁之后会唤醒这些线程，被唤醒的线程就会进行新一轮的夺锁之争。

锁的优缺点对比

锁	优点	缺点	适用场景
偏向锁	加锁和解锁不需要额外的消费，和执行非同步方法相比仅存在纳秒级的差距	如果线程间存在锁竞争，会带来额外的锁撤销的消耗	适用于只有一个线程访问同步块场景
轻量级锁	竞争的线程不会阻塞，提高了程序的响应速度	如果始终得不到竞争的线程，使用自旋会消耗CPU	追求响应时间，同步块执行速度非常快
重量级锁	线程竞争不使用自旋，不会消耗CPU	线程阻塞，响应时间缓慢	追求吞吐量，同步块执行速度较长（不懂）

2.3 原子操作的实现原理

原子操作（atomic operation），不可被中断的一个或一系列操作。

1、CPU术语

术语名称	英文	解释
缓存行	Cache line	缓存的最小操作单位
比较并交换	Compare and Swap	CAS操作需要输入两个数值，一个旧值（期望操作前的值）和一个新值，在操作期间先比较旧值有没有发生变化，如果没有发生变化，才交换成新值，发生了变化则不交换
CPU流水	CPU pipeline	CPU流水线的工作方式就像工业生产上的装配流水线，在CPU中由5-6个不同功能的电路单元组成一条指令处理流水线，然后将一条X86指令分成5-6步后再由这些电路单元分别指向，这样就能实现在一个CPU时钟周期完成一条指令，因此提高CPU的运算速度
内存顺序冲突	Memory order violation	内存顺序冲突一般是由假共享引起的，假共享是指多个CPU同时修改同一个缓存行的不同部分而引起其中一个CPU的操作无效，当出现这个内存顺序冲突时，CPU必须清空流水线

2、处理器如何实现原子操作

32位IA-32处理器使用基于对缓存加锁或总线加锁的方式来实现多处理器之间的原子操作。

首先处理器会自动保证基本的内存操作的原子性。处理器保证从系统内存中读取或者写入一个字节是原子的，意思是当一个处理器读取一个字节时，其他处理器不能访问这个字节的内存地址。Pentium 6和最新的处理器能自动保证单处理器对同一个缓存行里进行16/32/64位的操作是原子的，但是复杂的内存操作处理器是不能自动保证其原子性的，比如跨总线宽度、跨多个缓存行和跨页表的访问。但是

处理器提供总线锁定和缓存锁定两个机制来保证复杂内存操作的原子性。

（1）使用总线锁保证原子性

如果多个处理器同时对共享变量进行读改写操作（i++），那么共享变量就被多个处理器同时进行操作，不是原子的，操作结果可能会和期望值不一样。如果i=1，操作两次i++，结果可能是2.
所谓总线锁，就是使用处理器提供的一个LOCK#信号，当一个处理器在总线上输出此信号时，其他处理器的请求将被阻塞住，那该处理器就可独占共享内存。

（2）使用缓存锁保证原子性

同一时刻，我们只需保证某个内存地址的操作是原子性即可，但总线锁定把CPU和内存之间的通信锁住了，使得锁定期间，其他处理器不能操作其他内存地址的数据，所以总线锁定开销较大。
【参考volatile的两条实现原则中第一条】
频繁使用的内存，会缓存在处理器的L1、L2和L3高速缓存里，原子操作可以直接在处理器内部缓存中进行，并不需要声明总线锁。

  缓存锁定：指内存区域如果被缓存在处理器的缓存行中，并且在Lock操作期间被锁定，那么当它执行操作回写到内存时，处理器不在总线上声言LOCK#信号，而是是修改内部的内存地址，使用缓存一致性机制确保修改操作的原子性。
  缓存一致性：阻止同时修改由两个以上处理器缓存的内存区域的数据，当其他处理器回写已被锁定的缓存行的数据时，会使缓存行无效。

如下两种情况不会使用缓存锁定：

（1）当操作的数据不能被缓存在处理器的内部，或操作的数据跨多个缓存行（cache line）时，则处理器会调用总线锁定。
（2）有些处理器不支持缓存锁定。如Intel 486和Pentium处理器，就算锁定的内存区域在处理器的缓存行中也会调用总线锁定。

  针对以上两个机制，我们通过Intel处理器提供的很多Lock前缀指令来实现。如：位测试、修改指令、交换指令以及一些操作数、逻辑指令等，被这些指令操作的内存都会加锁。

3、Java如何实现原子操作

（1）使用循环CAS实现原子操作

JVM中的CAS操作正是利用了处理器提供的CMPXCHG指令实现的。自旋CAS实现的基本思路就是循环进行CAS操作直到成功为止。
以下代码实现了一个机遇CAS线程安全的计数器方法safeCount和一个非线程安全的计数器count。

package com.tmz.concurrentprogram;

import java.util.ArrayList;
import java.util.List;
import java.util.concurrent.atomic.AtomicInteger;

public class Counter {

   private AtomicInteger atomicI = new AtomicInteger(0);
   private int i = 0;

   public static void main(String[] args) {
       final Counter cas = new Counter();
       List<Thread> ts = new ArrayList<Thread>(600);
       long start = System.currentTimeMillis();
       for (int j = 0; j < 100; j++) {
           Thread t = new Thread(new Runnable() {
               public void run() {
                   for (int i = 0; i < 10000; i++){
                       cas.count();
                       cas.safeCount();
                   }
               }
           });
           ts.add(t);
       }
       for (Thread t : ts) {
           t.start();
       }
       //等待所有线程执行完成
       for(Thread t : ts) {
           try{
               t.join();
           } catch (InterruptedException e) {
               e.printStackTrace();
           }
       }
       System.out.println(cas.i);
       System.out.println(cas.atomicI.get());
       System.out.println(System.currentTimeMillis() - start);
   }


   /**
    * 非线程安全计数器
    */
   private void count() {
       i++;
   }

   /**
    * 使用CAS实现线程安全计数器
    */
   private void safeCount() {
       for(;;) {
           int i = atomicI.get();
           boolean sunc = atomicI.compareAndSet(i, ++i);
           if(sunc) {
               break;
           }
       }
   }
}

执行结果：
在这里插入图片描述
JDK的并发包里提供了一些类来支持原子操作，如AtomicBoolean、AtomicInteger、AtomicLong。这些原子包装类还提供了有用的工具方法，比如以原子的方式将当前值自增1和自减1。

（2）CAS实现原子操作的三大问题

在Java并发包中有一些并发框架也使用了自旋CAS的方式来实现原子操作，比如LinkedTransferQueue类的Xfer方法。

ABA问题

A->B->A，CAS检查时认为没有发生变化，但实际上变化了。
解决思路，追加版本号，1A->2B->3A，JDK的Atomic包里提供类AtomicStampedReference解决ABA问题。

public boolean compareAndSet(
            V expectedReference,
            V newReference,
            int expectedStamp,
            int newStamp
    )

循环时间长开销大

CAS自旋如果长时间不成功，会给CPU带来非常大的执行开销。如果JVM支持处理器提供的pause指令，那么效率会有一定的提升。pause指令有两个作用：第一，它可以延迟流水线执行指令（de-pipeline)，使用CPU不会消耗过多的执行资源，延迟的时间取决于具体实现的版本，在一些处理器上延迟时间是零；第二，它可以避免在退出循环的时候因内存顺序冲突（Memory Order Violation）而引起CPU流水线被情况（CPU Pipeline Flush），从而提高CPU的执行效率。（不懂）

只能保证一个共享变量的原子操作（不懂）

当对多个共享变量操作时，循环CAS就无法保证操作的原子性，这时可以用锁。也可以将多个共享变量合并成一个来操作，如i=2，j=a，合并为ij=2a。JDK提供了AtomicReference类来保证引用对象之间的原子性，就可以把多个变量放在一个对象里来进行CAS操作。

使用锁机制实现原子操作

锁机制保证了只有获得锁的线程才能够操作锁定的内存区域。JVM内部实现了多种锁机制，有偏向锁、轻量级锁、互斥锁。除了偏向锁，JVM实现锁的方式都用了循环CAS，即当一个线程想进入同步块的时候使用循环CAS的方式来获取锁，当它退出同步块的时候使用循环CAS释放锁。

2.4 本章小结

本章研究了volatile、synchronized和原子操作的实现原理。
待看Atomic的compareAndSet源码，了解CAS实现

魔道祖师^_^

关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
java并发编程的艺术-学习-2

第二章 Java并发机制的底层实现原理Java代码在编译后会变成java字节码，字节码被类加载器加载到JVM里，JVM执行字节码，最终需要转化为汇编指令在CPU上执行，Java中所使用的并发机制依赖于JVM的实现和CPU的指令。2.1 Volatile的应用在多线程并发编程中synchronized和volatile都扮演着重要角色，volatile是轻量级的synchronized，它在...
复制链接

扫一扫