前言
成为一名优秀的Android开发,需要一份完备的 知识体系,在这里,让我们一起成长为自己所想的那样~。
在 Android 性能优化的知识体系当中,包体积优化一直被排在优先级比较低的位置,从而导致很多开发同学对自身应用的大小并不重视。在项目发展的历程中,一般可划分为如下三个阶段:
初创期 => 成长期 => 成熟期
通常来说,当应用处于成长期的中后阶段时,才会考虑去做系统的包体积优化,因此,只有在这个阶段及之后,包体积优化带来的收益才是可观的。
那么,包体积优化能够给我们带来哪些 收益 呢?如何全面对应用的包体积进行 系统分析 及 针对性优化 呢?在这篇文章中,我们将一起进行深入地分析与探索。
思维导图大纲
目录
- 一、瘦身优化及 Apk 分析方案
- 1、瘦身优势
- 2、APK 组成
- 3、APK 分析
- 二、代码瘦身方案探索
- 1、Dex 探秘
- 2、ProGuard
- 3、D8 与 R8 优化
- 4、去除 debug 信息与行号信息
- 5、dex 分包优化
- 6、使用 XZ Utils 进行 Dex 压缩
- 7、三方库处理
- 8、移除无用代码
- 9、避免产生 Java access 方法
- 10、利用 ByteX Gradle 插件平台中的代码优化插件
- 11、小结
- 三、资源瘦身方案探索
- 1、冗余资源优化
- 2、重复资源优化
- 3、图片压缩
- 4、使用针对性的图片格式
- 5、资源混淆
- 6、R Field 的内联优化
- 7、资源合并方案
- 8、资源文件最少化配置
- 9、尽量每张图片只保留一份
- 10、资源在线化
- 11、统一应用风格
- 四、So 瘦身方案探索
- 1、So 移除方案
- 2、So 移除方案优化版
- 3、使用 XZ Utils 对 Native Library 进行压缩
- 4、对 Native Library 进行合并
- 5、删除 Native Library 中无用的导出 symbol
- 6、So 动态下载
- 五、其它优化方案
- 1、插件化
- 2、业务梳理
- 3、转变开发模式
- 六、包体积监控
- 1、包体积监控的纬度
- 七、瘦身优化常见问题
- 1、怎么降低 Apk 包大小?
- 2、Apk 瘦身如何实现长效治理?
- 八、总结
下面,我们就先来了解下为什么要进行瘦身优化以及如何对 Apk 大小进行分析。
一、瘦身优化及 Apk 分析方案介绍
1、瘦身优势
我们首先来介绍下,为什么我们需要做 APK 的瘦身优化?
APK 瘦身优化的原因
主要有 三个方面 的原因:
1、下载转化率
APK 瘦身优化在实际的项目中优先级是比较低的,因为做了之后它的好处不是那么明显,尤其是那些还没有到 稳定期 的项目,我们都知道,App 的发展历程是从 项目初期 => 成长期 => 稳定期,对于处于 发展初期与成长期 的项目而言,可能会做 启动优化、卡顿优化,但是一般不会做 瘦身优化,瘦身优化 最主要的好处是对应用 下载转化率 的影响,它是 App 业务运营的重要指标之一,在项目精细化运营的阶段是非常重要的。因为如果你的 App 与其它同类型的 App 相比 Apk 体积要更小的话,那么你的 App 下载率就可能要高一些。而且,包体积越小,用户下载等待的时间也会越短,所以下载转换成功率也就越高。所以,安装包大小与下载转化率的关系 大致是成反比 的,即安装包越大,下载转换率就越小。一个 80MB 的应用,用户即使点了下载,也可能因为网络速度慢、突然反悔导致下载失败。而对于一个 20MB 的应用,用户点了下载之后,在犹豫要不要下的时候可能就已经下载完了。
而且,现在很多大型的 App 一般都会有一个 Lite 版本的 App,这个也是出于下载转化率方面的考虑。
2、应用市场
Google Play 应用市场强制要求超过 100MB 的应用只能使用 APK 扩展文件方式 上传。当使用 APK 扩展文件方式 上传时,Google Play 会为我们的应用 托管 扩展文件,并将其 免费提供 给设备。扩展文件将保存到设备的共享存储位置(SD 卡或可安装 USB 的分区;也称为“外部”存储),应用可以在其中访问它们。在大多数设备上,Google Play 会在下载 APK 的同时下载扩展文件,因此应用在用户首次打开时便拥有了所需的一切。但是,在某些情况下,我们的应用必须在应用启动时从 Google Play 下载文件。如果您想避免使用扩展文件,并且想要应用程序的下载大小大于100 MB,则应该使用 Android App Bundles 上传应用程序,此时应用程序最多可提供150 MB的压缩下载大小。Android App Bundles 就是 Android 应用程序捆绑包,它能够让 App 以 添加动态功能模块的方式 去解决 APK 大小较大的问题。如下,就是由一个基本模块和两个动态功能模块组成的 Android App Bundle APK 的组成结构图:
3、渠道合作商的要求
此外,还有一个原因,当我们的 App 做大之后,可能需要跟各个手机厂商合作预装,这些 渠道合作商会对你的 App 做详细的要求,只有达到相应的要求后才允许你的 App 预装到手机上。而且,越大的 App 其单价成本也会越高。所以,瘦身也是我们项目做大之后一定会遇到的一个问题。
体积过大对 App 性能的影响
此外,包体积除了会影响 应用的下载转化率 之外,主要还会对 App 三个方面 的性能有一定的影响,如下所示:
- 1)、安装时间:比如 文件拷贝、Library 解压,并且,在编译 ODEX 的时候,特别是对于 Android 5.0 和 6.0 系统来说,耗费的时间比较久,而 Android 7.0 之后有了 混合编译,所以还可以接受。最后,App 变大后,其 签名校验 的时间也会变长。
- 2)、运行时内存:Resource 资源、Library 以及 Dex 类加载都会占用应用的一部分内存。
- 3)、ROM 空间:如果应用的安装包大小为 50MB,那么启动解压之后很可能就已经超过 100MB 了。并且,如果 闪存空间不足,很可能出现“写入放大”的情况,它是闪存和固态硬盘(SSD)中一种不良的现象,闪存在可重新写入数据前必须先擦除,而擦除操作的粒度与写入操作相比低得多,执行这些操作就会多次移动(或改写)用户数据和元数据。因此,要改写数据,就需要读取闪存某些已使用的部分,更新它们,并写入到新的位置,如果新位置在之前已被使用过,还需连同先擦除;由于闪存的这种工作方式,必须擦除改写的闪存部分比新数据实际需要的大得多。即最终可能导致实际写入的物理资料量是写入资料量的多倍。
2、APK 组成
我们都知道,Android 项目最终会编译成一个 .apk 后缀的文件,实际上它就是一个 压缩包。因此,它内部还有很多不同类型的文件,这些文件,按照大小,共分为如下几类:
- 1)、代码相关:classes.dex,我们在项目中所编写的 java 文件,经过编译之后会生成一个 .class 文件,而这些所有的 .class 文件呢,它最终会经过 dx 工具编译生成一个 classes.dex。
- 2)、资源相关:res、assets、编译后的二进制资源文件 resources.arsc 和 清单文件 等等。res 和 assets 的不同在于 res 目录下的文件会在 .R 文件中生成对应的资源 ID,而 assets 不会自动生成对应的 ID,而是通过 AssetManager 类的接口来获取。此外,每当在 res 文件夹下放一个文件时,aapt 就会自动生成对应 id 并保存在 .R 文件中,但 .R 文件仅仅只是保证编译程序不会报错,实际上在应用运行时,系统会根据 ID 寻找对应的资源路径,而 resources.arsc 文件就是用来记录这些 ID 和 资源文件位置对应关系 的文件。
- 3)、So 相关:lib 目录下的文件,这块文件的优化空间其实非常大。
此外,还有 META-INF,它存放了应用的 签名信息,其中主要有 3个文件,如下所示:
- 1)、MANIFEST.MF:其中每一个资源文件都有一个对应的 SHA-256-Digest(SHA1) 签名,MANIFEST.MF 文件的 SHA256(SHA1) 经过 base64 编码的结果即为 CERT.SF 中的 SHA256(SHA1)-Digest-Manifest 值。
- 2)、CERT.SF:除了开头处定义的 SHA256(SHA1)-Digest-Manifest 值,后面几项的值是对 MANIFEST.MF 文件中的每项再次 SHA256(SHA1) 经过 base64 编码后的值。
- 3)、CERT.RSA:其中包含了公钥、加密算法等信息。首先,对前一步生成的MANIFEST.MF使用了SHA256(SHA1)-RSA算法,用开发者私钥签名。然后,在安装时使用公钥解密。最后,将其与未加密的摘要信息(MANIFEST.MF文件)进行对比,如果相符,则表明内容没有被修改。
3、APK分析
下面,我们就来学习 APK 分析的 四种常用方式。
1、使用 ApkTool 反编译工具分析 APK
第一种方式,就是使用 ApkTool 这个反编译工具,它的官网地址如下:
其具体的 反编译命令 如下所示:
apktool d xxx.apk
下面,我们就来使用 ApkTool 来对应用进行反编译。
ApkTool反编译实战
1、下载并配置apktool
我这里仅介绍 Mac OS X 平台上的下载配置,其它平台请点击上方链接查看。
- 1)、下载脚本,保存为 apktool 文件。
- 2)、下载最新版 apktool.jar(需要翻墙)
- 3)、将下载的 jar 包重命名为 apktool.jar。
- 4)、配置环境变量,这里有两种方案,如下所示:
- 第一种是直接将 apktool 和 apktool.jar 移到 /usr/local/bin 目录,但是这里需要 root 权限,命令前加 sudo,回车后输入密码即可。
- 第二种是在 ~/.bash_profile 文件下配置,首先新建 apktool 文件夹,将两个文件放到这个文件下,打开终端,使用 vim 加上环境配置,其命令如下所示:
// 1、使用vim命令在命令行打开.bash_profile文件,并可以在命令行
// 上编辑,当然,你也可以直接打开.bash_profile文件
vim ~/.bash_profile
// 2、在.bash_profile最后加上这一行即可
export PATH=前面路径/apktool:$PATH
// 3、使编辑后的配置生效
source ~/.bash_profile
-
5)、最后,使用以下命令将两个文件权限设置为 可执行 即可:
sudo chmod a+x file
2、使用ApkTool分析APK
我们在命令行下输入以下命令对 APK 进行反编译,如下所示:
java -jar apktool_2.3.4.jar apktool d app-release.apk
反编译完成之后,它就会在当前的文件夹下面生成 app-release 的目录,目录结构如下所示:
这样我们就可以看到当前 App的具体组成 了。下面,我们介绍下第二种 APK 分析 的方式。
2、使用AS 2.2之后提供的Analyze APK
Analyze APK 具有如下功能:
- 1)、可以直观地查看到 APK 的组成,比如大小、占比等等。
- 2)、查看 dex 文件的组成。
- 3)、对不同的 APK 进行对比分析。
下面,我们就来具体实战一下,需要注意的是,我们可以 直接将电脑上的 apk 拖进 AS 中就可以自动使用 Analyze APK 打开 apk。然后,我们就可以看到 APK 文件的绝对大小以及各组成文件的百分占比,如下图所示:
可以看到,Awesome-WanAndroid 应用的 classes.dex 的大小为 3.3MB,总占比为 42.2%。并且,lib 和 res 目录也有 1.9MB,总占比大概为 25%,因此,对于 Awesome-WanAndroid App的优化方向就应该是 dex 为主、so 和 res 为辅 了。此外,我们还可以查看 classes.dex 中还包含有哪些类,如下图所示:
我们平时在做 竞品分析 的时候,就能够很方便地来 看一下我们 App 的竞品用到了哪些第三方 SDK。同时,我们也可以从清单文件中很方便地查看 APK 文件的最终版本,因为 Analyze APK 能够直接对清单文件进行解析。
此外,在应用右上角还有一个 Compare with previos APK 的按钮,我们点击它之后,就可以 将当前的 APK 与别的版本的 APK 进行对比,这样就可以对新旧两个版本的 APK 文件大小进行对比。
接下来,我们再介绍下第三种 APK 分析的方式。
3、使用 nimbledroid 进行 APK 性能分析
nibledroid 是美国哥伦比亚大学的博士创业团队研发出来的分析 Android App 性能指标的系统,分析的方式有静态和动态两种方式,如下所示:
- 1)、静态分析:可以分析出APK安装包中大文件排行榜,Dex 方法数和知名第三方 SDK 的方法数及占代码整体的比例。
- 2)、动态分析:可以给出 冷启动时间, 列出 Block UI 的具体方法, 内存占用, 以及 Hot Methods, 从这些分析报告中, 可以 定位出具体的优化点。
它的使用方式其实非常简单,只需要直接上传APK 即可。然后,nimbledroid 网站的后台就会自动对 APK 进行分析,并最终给出一份 全面的 APK 分析报告。
下面,我们再来介绍最后一种 APK 分析工具,即二进制检查工具 android-classshark。
4、使用 android-classshark 进行 APK 分析
android-classshark 是一个 面向 Android 开发人员的独立二进制检查工具,它可以 浏览任何的 Android 可执行文件,并且检查出信息,比如类的接口、成员变量等等,此外,它还可以支持多种格式,比如说 APK、Jar、Class、So 以及所有的 Android 二进制文件如清单文件等等。下面,我们就来使用 android-classshark 来进行一下实战。
android-classshark 实战
首先,我们从它的 Github 地址上下载对应的 ClassyShark.jar,地址如下所示:
然后,我们双击打开 ClassShark.jar,拖动我们的 APK 到它的工作空间即可。接下来,我们就可以看到 Apk 的分析界面了,这里我们点击 classes 下的 classes.dex,在分析界面 左边 可以看到该 dex 的方法数和文件大小,并且,最下面还显示出了该 dex 中包含有 Native Call 的类。如下图所示:
此外,我们点击左上角的 Methods count 还可以切换到 方法数环形图标统计界面,我们不仅可以 直观地看到各个包下的方法数和相对大小,还可以看到各个子包下的方法数和相对大小。如下图所示:
二、代码瘦身方案探索
在讲解如何对 Dex 进行优化之前,可能有很多同学对 Dex 还没有足够的了解,这里我们就先详细地了解下 Dex。
1、Dex 探秘
Dex 是 Android 系统的可执行文件,包含 应用程序的全部操作指令以及运行时数据。因为 Dalvik 是一种针对嵌入式设备而特殊设计的 Java 虚拟机,所以 Dex 文件与标准的 Class 文件在结构设计上有着本质的区别。当 Java 程序被编译成 class 文件之后,还需要使用 dx 工具将所有的 class 文件整合到一个 dex 文件中,这样 dex 文件就将原来每个 class 文件中都有的共有信息合成了一体,这样做的目的是 保证其中的每个类都能够共享数据,这在一定程度上 降低了信息冗余,同时也使得 文件结构更加紧凑。与传统 jar 文件相比,Dex 文件的大小能够缩减 50% 左右。关于 Class 文件与 Dex 文件的结果对比图如下所示:
如果想深入地了解 Dex 文件格式,可以参见Google 官方教程 - Dex格式。
Dex 一般在应用包体积中占据了不少比重,并且,Dex 数量越多,App 的安装时间也会越长。所以,优化它们可以说是 重中之重。下面,我们就来看看有哪些方式可以优化 Dex 这部分的体积。
2、ProGuard
Java 是一种跨平台的、解释型语言,而 Java 源代码被编译成 中间 ”字节码” 存储于 Class 文件之中。
那么,我们为什么要使用代码混淆呢?
由于跨平台的需要,Java 字节码 中包括了很多源代码信息,如变量名、方法名,并且通过这些名称来访问变量和方法,这些 符号带有许多语义信息,很 容易被反编译成 Java 源代码。为了防止这种现象,我们可以使用 Java 混淆器对 Java 字节码进行混淆。
代码混淆也被称为 花指令,它 将计算机程序的代码转换成一种功能上等价,但是难以阅读和直接理解的形式。混淆就是对发布出去的程序进行重新组织和处理,使得处理后的代码与处理前代码完成相同的功能,而混淆后的代码很难被反编译,即使反编译成功也很难得出程序的真正语义。混淆器的 作用 不仅仅是 保护代码,它也有 精简编译后程序大小 的作用,其 通过缩短变量和函数名以及丢失部分无用信息等方式,能使得应用包体积减小。
代码混淆的形式
目前,代码混淆的形式主要有 三种,如下所示:
- 1)、将代码中的各个元素,比如类、函数、变量的名字改变成无意义的名字。例如将 hasValue 转换成单个的字母 a。这样,反编译阅读的人就无法通过名字来猜测用途。
- 2)、重写 代码中的 部分逻辑,将它变成 功能上等价,但是又 难以理解 的形式。比如它会 改变循环的指令、结构体。
- 3)、打乱代码的格式,比如多加一些空格或删除空格,或者将一行代码写成多行,将多行代码改成一行。
Proguard 的作用
在 Android SDK 里面集成了一个工具 — Proguard,它是一个免费的 Java 类文件 压缩、优化、混淆、预先校验 的工具。它的 主要作用 大概可以概括为 两点,如下所示:
- 1)、瘦身:它可以检测并移除未使用到的类、方法、字段以及指令、冗余代码,并能够对字节码进行深度优化。最后,它还会将类中的字段、方法、类的名称改成简短无意义的名字。
- 2)、安全:增加代码被反编译的难度,一定程度上保证代码的安全。
所以说,混淆不仅是保障 Android 程序源码安全 的 第一道门槛,而且在一定程度上,使用它能够减小 优化字节码 的大小。优化字节码 的处理流程如下图所示:
而它的作用具体可以细分三点,如下所示:
1、压缩(Shrinking)
默认开启,以减小应用体积,移除未被使用的类和成员,并且 会在优化动作执行之后再次执行,因为优化后可能会再次暴露一些未被使用的类和成员。我们可以使用如下规则来关闭压缩:
-dontshrink 关闭压缩
2、优化(Optimization)
默认开启,在 字节码级别执行优化,让应用 运行的更快。使用如下规则可进行优化相关操作:
-dontoptimize 关闭优化
-optimizationpasses n 表示proguard对代码进行迭代优化的次数,Android一般为5
3、混淆(Obfuscation)
默认开启,增大反编译难度,类和类成员会被随机命名,除非用 优化字节码 等规则进行保护。使用如下规则可以关闭混淆:
-dontobfuscate 关闭混淆
Proguard 的优化细节
Proguard 中所做的优化包括 内联、修饰符、合并类和方法等 30 多种优化项,在特定的情况下,它尽可能地做了相应的优化,下面列出了部分的 优化细节:
- 1)、优化了 Gson 库的使用。
- 2)、把类都标记为 final。
- 3)、把枚举类型简化为常量。
- 4)、把一些类都垂直合并进当前类的结构中。
- 5)、把一些类都水平合并进当前类的结构中。
- 6)、移除 write-only 字段。
- 7)、把类标记为