JVM学习笔记（1）-- JVM与Java体系结构

1.该系列为 尚硅谷JVM教程 学习笔记，面向 Java8，更多内容见 JVM笔记归档目录

第1章-JVM和Java体系架构

为什么要学习JVM

1. 更深入理解Java：做Java开发不能只知道怎么使用java提供的api，还需要知道背后到底发生了什么，具体它是如何运行的，这才是一个合格的java开发人员。比如你需要知道：一个类是如何装载到JVM的？它是如何存储？如何运行？方法是如何调用的？……总之要做的知其然知其所以然，这样才算真正掌握了java语言的精髓。
2. 排查解决故障：在实际工作中，很多故障和问题都和JVM息息相关。比如：内存溢出导致宕机，cpu使用率居高不下，应用频卡顿……这些需要具备JVM知识。
3. 性能调优：要让java应用运行的更快，更稳定，JVM调优是必备的手段。比如：需要合理的分配内存、调整参数、选择GC垃圾回收器……第三方的中间件……

推荐参考资料

英文文档规范：Java SE Specifications (oracle.com)

经典书籍：深入理解Java虚拟机（第3版） (豆瓣) (douban.com)

Java-跨平台的语言

JVM-跨语言的平台

1. 随着Java7的正式发布，Java虚拟机的设计者们通过JSR-292规范基本实现在Java虚拟机平台上运行非Java语言编写的程序。
2. Java虚拟机根本不关心运行在其内部的程序到底是使用何种编程语言编写的，它只关心“字节码”文件。也就是说Java虚拟机拥有语言无关性，并不会单纯地与Java语言“终身绑定”，只要其他编程语言的编译结果满足并包含Java虚拟机的内部指令集、符号表以及其他的辅助信息，它就是一个有效的字节码文件，就能够被虚拟机所识别并装载运行。
3. Java不是最强大的语言，但是JVM是最强大的虚拟机

字节码

1. 我们平时说的java字节码，指的是用java语言编译成的字节码。准确的说任何能在jvm平台上执行的字节码格式都是一样的。所以应该统称为：jvm字节码。
2. 不同的编译器，可以编译出相同的字节码文件，字节码文件也可以在不同的JVM上运行。
3. Java虚拟机与Java语言并没有必然的联系，它只与特定的二进制文件格式——Class文件格式所关联，Class文件中包含了Java虚拟机指令集（或者称为字节码、Bytecodes）和符号表，还有一些其他辅助信息。

Java发展重大事件

• 1990年，在Sun计算机公司中，由Patrick Naughton、MikeSheridan及James Gosling领导的小组Green Team，开发出的新的程序语言，命名为Oak，后期命名为Java
• 1995年，Sun正式发布Java和HotJava产品，Java首次公开亮相
• 1996年1月23日Sun Microsystems发布了JDK 1.0
• 1998年，JDK1.2版本发布。同时，Sun发布了JSP/Servlet、EJB规范，以及将Java分成了J2EE、J2SE和J2ME。这表明了Java开始向企业、桌面应用和移动设备应用3大领域挺进
• 2000年，JDK1.3发布，Java HotSpot Virtual Machine正式发布，成为Java的默认虚拟机
• 2002年，JDK1.4发布，古老的Classic虚拟机退出历史舞台
• 2003年年底，Java平台的scala正式发布，同年Groovy也加入了Java阵营
• 2004年，JDK1.5发布。同时JDK1.5改名为JavaSE5.0
• 2006年，JDK6发布。同年，Java开源并建立了OpenJDK。顺理成章，Hotspot虚拟机也成为了OpenJDK中的默认虚拟机
• 2007年，Java平台迎来了新伙伴Clojure
• 2008年，oracle收购了BEA，得到了JRockit虚拟机
• 2009年，Twitter宣布把后台大部分程序从Ruby迁移到Scala，这是Java平台的又一次大规模应用
• 2010年，Oracle收购了Sun，获得Java商标和最真价值的HotSpot虚拟机。此时，Oracle拥有市场占用率最高的两款虚拟机HotSpot和JRockit，并计划在未来对它们进行整合：HotRockit。JCP组织管理Java语言
• 2011年，JDK7发布。在JDK1.7u4中，正式启用了新的垃圾回收器G1
• 2017年，JDK9发布。将G1设置为默认GC，替代CMS
• 同年，IBM的J9开源，形成了现在的Open J9社区
• 2018年，Android的Java侵权案判决，Google赔偿Oracle计88亿美元
• 同年，Oracle宣告JavagE成为历史名词JDBC、JMS、Servlet赠予Eclipse基金会
• 同年，JDK11发布，LTS版本的JDK，发布革命性的ZGC，调整JDK授权许可
• 2019年，JDK12发布，加入RedHat领导开发的Shenandoah GC

Java虚拟机

• Java虚拟机是一台执行Java字节码的虚拟计算机，它拥有独立的运行机制，其运行的Java字节码也未必由Java语言编译而成。
• JVM平台的各种语言可以共享Java虚拟机带来的跨平台性、优秀的垃圾回器，以及可靠的即时编译器。
• Java技术的核心就是Java虚拟机（JVM，Java Virtual Machine），因为所有的Java程序都运行在Java虚拟机内部。

作用:

Java虚拟机就是二进制字节码的运行环境，负责装载字节码到其内部，解释/编译为对应平台上的机器指令执行。每一条Java指令，Java虚拟机规范中都有详细定义，如怎么取操作数，怎么处理操作数，处理结果放在哪里。

特点:

一次编译，到处运行，自动内存管理，自动垃圾回收功能

JVM的位置

JVM的整体结构

• HotSpot VM是目前市面上高性能虚拟机的代表作之一。
• 它采用解释器与即时编译器并存的架构。
• 在今天，Java程序的运行性能早已脱胎换骨，已经达到了可以和C/C++程序一较高下的地步。

Java代码执行流程

JVM指令集的架构模型

Java编译器输入的指令流基本上是一种基于栈的指令集架构，另外一种指令集架构则是基于寄存器的指令集架构。具体来说：这两种架构之间的区别：

基于栈的指令集架构

1. 设计和实现更简单，适用于资源受限的系统；
2. 避开了寄存器的分配难题：使用零地址指令方式分配
3. 指令流中的指令大部分是零地址指令，其执行过程依赖于操作栈。指令集更小，编译器容易实现
4. 不需要硬件支持，可移植性更好，更好实现跨平台

基于寄存器的指令级架构

1. 典型的应用是x86的二进制指令集：比如传统的PC以及Android的Davlik虚拟机。
2. 指令集架构则完全依赖硬件，与硬件的耦合度高，可移植性差
3. 性能优秀和执行更高效
4. 花费更少的指令去完成一项操作
5. 在大部分情况下，基于寄存器架构的指令集往往都以一地址指令、二地址指令和三地址指令为主，而基于栈式架构的指令集却是以零地址指令为主

总结

由于跨平台性的设计，Java的指令都是根据栈来设计的。不同平台CPU架构不同，所以不能设计为基于寄存器的。栈的优点：跨平台，指令集小，编译器容易实现，缺点是性能比寄存器差一些。

JVM的生命周期

虚拟机的启动

Java虚拟机的启动是通过引导类加载器（bootstrap class loader）创建一个初始类（initial class）来完成的，这个类是由虚拟机的具体实现指定的。

虚拟机的执行

1. 一个运行中的Java虚拟机有着一个清晰的任务：执行Java程序
2. 程序开始执行时他才运行，程序结束时他就停止
3. 执行一个所谓的Java程序的时候，真真正正在执行的是一个叫做Java虚拟机的进程

虚拟机的退出

有如下的几种情况：

1. 程序正常执行结束
2. 程序在执行过程中遇到了异常或错误而异常终止
3. 由于操作系统用现错误而导致Java虚拟机进程终止
4. 某线程调用Runtime类或System类的exit()方法，或Runtime类的halt()方法，并且Java安全管理器也允许这次exit()或halt()操作。
5. 除此之外，JNI（Java Native Interface）规范描述了用JNI Invocation API来加载或卸载 Java虚拟机时，Java虚拟机的退出情况。

JVM发展历程

Sun Classic VM

• 早在1996年Java1.0版本的时候，Sun公司发布了一款名为sun classic VM的Java虚拟机，它同时也是世界上第一款商用Java虚拟机，JDK1.4时完全被淘汰。

• 这款虚拟机内部只提供解释器，没有即时编译器，效率较低。

• 如果使用JIT编译器，就需要进行外挂。但是一旦使用了JIT编译器，JIT就会接管虚拟机的执行系统。解释器就不再工作，解释器和编译器不能配合工作。

  • 即使使用了外挂 JIT 编译器，Sun Classic 虚拟机的执行速度也快不起来。因为解释器无法和编译器配合工作，虚拟机无法判断哪个方法是使用频率高，所以它只能对每个方法都进行编译。这就导致了虚拟机只能采取相对简单的优化技术，无法进行耗时稍微较高的优化技术。因为如果对所有代码都采用耗时高的优化技术，那么编译时间会慢得无法接受。

• 现在Hotspot内置了此虚拟机。

Exact VM

• 为了解决上一个虚拟机问题，jdk1.2时，Sun提供了此虚拟机。

• Exact Memory Management：准确式内存管理

  • 也可以叫Non-Conservative/Accurate Memory Management
  • 虚拟机可以知道内存中某个位置的数据具体是什么类型

• 具备现代高性能虚拟机的维形

  • 热点探测（寻找出热点代码进行缓存）
  • 编译器与解释器混合工作模式

• 只在Solaris平台短暂使用，其他平台上还是Classic VM

  • 英雄气短，终被Hotspot虚拟机替换

HotSpot VM

• 三大商用虚拟机之一，目前Hotspot占有绝对的市场地位，称霸武林

  • 不现在仍在广泛使用的JDK8中，默认的虚拟机就是HotSpot
  • Sun/Oracle JDK和OpenJDK的默认虚拟机
  • 因此本课程中默认介绍的虚拟机都是HotSpot，相关机制也主要是指HotSpot的GC机制。（比如其他两个商用虚机都没有方法区的概念）

• HotSpot历史

  • 最初由一家名为“Longview Technologies”的小公司设计
  • 1997年，此公司被Sun收购；2009年，Sun公司被甲骨文收购。
  • JDK1.3时，HotSpot VM成为默认虚拟机

• 从服务器、桌面到移动端、嵌入式都有应用。

• 名称中的HotSpot指的就是它的热点代码探测技术。

  • 通过计数器找到最具编译价值代码，触发即时编译或栈上替换
  • 通过编译器与解释器协同工作，在最优化的程序响应时间与最佳执行性能中取得平衡

JRockit

• 三大商用虚拟机之一
• 专注于服务器端应用：它可以不太关注程序启动速度，因此JRockit内部不包含解析器实现，全部代码都靠即时编译器编译后执行。
• 大量的行业基准测试显示，JRockit JVM是世界上最快的JVM：
  • 使用JRockit产品，客户已经体验到了显著的性能提高（一些超过了70%）和硬件成本的减少（达50%）。
• 优势：全面的Java运行时解决方案组合
  • JRockit面向延迟敏感型应用的解决方案JRockit Real Time提供以毫秒或微秒级的JVM响应时间，适合财务、军事指挥、电信网络的需要
  • Mission Control服务套件，它是一组以极低的开销来监控、管理和分析生产环境中的应用程序的工具。
• 2008年，JRockit被Oracle收购。
• Oracle表达了整合两大优秀虚拟机的工作，大致在JDK8中完成。整合的方式是在HotSpot的基础上，移植JRockit的优秀特性。

IBM的J9

• 三大商用虚拟机之一，也号称最快的JVM
• 全称：IBM Technology for Java Virtual Machine，简称IT4J，内部代号：J9
• 市场定位与HotSpot接近，服务器端、桌面应用、嵌入式等多用途VM广泛用于IBM的各种Java产品。
• 2017年左右，IBM发布了开源J9VM，命名为openJ9，交给Eclipse基金会管理，也称为Eclipse OpenJ9
• OpenJDK -> 是JDK开源了，包括了虚拟机

KVM和CDC/CLDC Hotspot

• Oracle在Java ME产品线上的两款虚拟机为：CDC/CLDC HotSpot Implementation VM
• KVM（Kilobyte）是CLDC-HI早期产品
• 目前移动领域地位尴尬，智能机被Android和iOS二分天下。
• KVM简单、轻量、高度可移植，面向更低端的设备上还维持自己的一片市场
  • 智能控制器、传感器
  • 老人手机、经济欠发达地区的功能手机
• 所有的虚拟机的原则：一次编译，到处运行。

Azul VM

• 前面三大“高性能Java虚拟机”使用在通用硬件平台上
• 这里Azul VW和BEA Liquid VM是与特定硬件平台绑定、软硬件配合的专有虚拟机：高性能Java虚拟机中的战斗机。
• Azul VM是Azul Systems公司在HotSpot基础上进行大量改进，运行于Azul Systems公司的专有硬件Vega系统上的Java虚拟机。
• 每个Azul VM实例都可以管理至少数十个CPU和数百GB内存的硬件资源，并提供在巨大内存范围内实现可控的GC时间的垃圾收集器、专有硬件优化的线程调度等优秀特性。
• 2010年，Azul Systems公司开始从硬件转向软件，发布了自己的Zing JVM，可以在通用x86平台上提供接近于Vega系统的特性。

Liquid VM

• 高性能Java虚拟机中的战斗机。
• BEA公司开发的，直接运行在自家Hypervisor系统上
• Liquid VM即是现在的JRockit VE（Virtual Edition）。Liquid VM不需要操作系统的支持，或者说它自己本身实现了一个专用操作系统的必要功能，如线程调度、文件系统、网络支持等。
• 随着JRockit虚拟机终止开发，Liquid vM项目也停止了。

Apache Marmony

• Apache也曾经推出过与JDK1.5和JDK1.6兼容的Java运行平台Apache Harmony。
• 它是IElf和Intel联合开发的开源JVM，受到同样开源的Open JDK的压制，Sun坚决不让Harmony获得JCP认证，最终于2011年退役，IBM转而参与OpenJDK
• 虽然目前并没有Apache Harmony被大规模商用的案例，但是它的Java类库代码吸纳进了Android SDK。

Micorsoft JVM

• 微软为了在IE3浏览器中支持Java Applets，开发了Microsoft JVM。
• 只能在window平台下运行。但确是当时Windows下性能最好的Java VM。
• 1997年，Sun以侵犯商标、不正当竞争罪名指控微软成功，赔了Sun很多钱。微软WindowsXP SP3中抹掉了其VM。现在Windows上安装的jdk都是HotSpot。

Taobao JVM

• 由AliJVM团队发布。阿里，国内使用Java最强大的公司，覆盖云计算、金融、物流、电商等众多领域，需要解决高并发、高可用、分布式的复合问题。有大量的开源产品。

• 基于OpenJDK开发了自己的定制版本AlibabaJDK，简称AJDK。是整个阿里Java体系的基石。

• 基于OpenJDK Hotspot VM发布的国内第一个优化、深度定制且开源的高性能服务器版Java虚拟机。

  • 创新的GCIH（GCinvisible heap）技术实现了off-heap，即将生命周期较长的Java对象从heap中移到heap之外，并且GC不能管理GCIH内部的Java对象，以此达到降低GC的回收频率和提升GC的回收效率的目的。
  • GCIH中的对象还能够在多个Java虚拟机进程中实现共享
  • 使用crc32指令实现JvM intrinsic降低JNI的调用开销
  • PMU hardware的Java profiling tool和诊断协助功能
  • 针对大数据场景的ZenGC

• taobao vm应用在阿里产品上性能高，硬件严重依赖inte1的cpu，损失了兼容性，但提高了性能

• 目前已经在淘宝、天猫上线，把Oracle官方JVM版本全部替换了。

Dalvik VM

• 谷歌开发的，应用于Android系统，并在Android2.2中提供了JIT，发展迅猛。

• Dalvik VM只能称作虚拟机，而不能称作“Java虚拟机”，它没有遵循 Java虚拟机规范

• 不能直接执行Java的Class文件

• 基于寄存器架构，不是jvm的栈架构。

• 执行的是编译以后的dex（Dalvik Executable）文件。执行效率比较高。

• 它执行的dex（Dalvik Executable）文件可以通过class文件转化而来，使用Java语法编写应用程序，可以直接使用大部分的Java API等。

• Android 5.0使用支持提前编译（Ahead of Time Compilation，AoT）的ART VM替换Dalvik VM。

Graal VM（未来虚拟机）

• 2018年4月，Oracle Labs公开了GraalvM，号称 “Run Programs Faster Anywhere”，勃勃野心。与1995年java的”write once，run anywhere”遥相呼应。
• GraalVM在HotSpot VM基础上增强而成的**跨语言全栈虚拟机，可以作为“任何语言”**的运行平台使用。语言包括：Java、Scala、Groovy、Kotlin；C、C++、Javascript、Ruby、Python、R等
• 支持不同语言中混用对方的接口和对象，支持这些语言使用已经编写好的本地库文件
• 工作原理是将这些语言的源代码或源代码编译后的中间格式，通过解释器转换为能被Graal VM接受的中间表示。Graal VM提供Truffle工具集快速构建面向一种新语言的解释器。在运行时还能进行即时编译优化，获得比原生编译器更优秀的执行效率。
• 如果说HotSpot有一天真的被取代，Graalvm希望最大。但是Java的软件生态没有丝毫变化。