前言
在做项目中导出文件的时候,特别是导出几十万行数据的excel的时候,经常碰到oom错误,这个时候我就特别想知道这个导致了oom的对象到底占用的多大的内存,于是乎…
参考
https://dslztx.github.io/blog/2016/09/10/%E8%AE%A1%E7%AE%97Java%E5%AF%B9%E8%B1%A1%E5%A4%A7%E5%B0%8F/
https://www.jianshu.com/p/5cd68b06b2d1
感谢上面的博主,我主要是从上面的几篇博文中得到了一下知识
上代码
package com.wangwei.ram_usage_demo;
import java.io.BufferedReader;
import java.io.FileReader;
import java.io.IOException;
import org.apache.lucene.util.RamUsageEstimator;
import com.wangwei.java_agant.MyAgent;
/**
* Hello world!
*
*/
public class App {
public static void main(String[] args) {
try {
BufferedReader in = new BufferedReader(new FileReader("E:\\work\\npp\\temp\\test\\test.txt"));
String str = in.readLine();
/** 方法一 简单粗暴,但是统计不准确*/
System.out.println("str : " + str);
System.out.println("getBytes : " + str.getBytes().length);
/** 方法二 使用第三方工具*/
// 计算指定对象及其引用树上的所有对象的综合大小,单位字节
long sizeOf = RamUsageEstimator.sizeOf(str);
System.out.println("sizeOf : " + sizeOf);
// 计算指定对象本身在堆空间的大小,单位字节
long shallowSizeOf = RamUsageEstimator.shallowSizeOf(str);
System.out.println("shallowSizeOf : " + shallowSizeOf);
// 计算指定对象及其引用树上的所有对象的综合大小,返回可读的结果,如:2KB
String humanSizeOf = RamUsageEstimator.humanSizeOf(str);
System.out.println("humanSizeOf : " + humanSizeOf);
/**方法三 用Instrumentation计算, 这种计算只计算指定对象本身在堆空间的大小,单位字节 a*/
long objectSize = MyAgent.getObjectSize(str);
System.out.println("objectSize : " + objectSize);
} catch (IOException e) {
e.printStackTrace();
}
}
}
为什么要计算一个file对象呢?因为我想看看在java中计算的大小和windows中计算的大小是否是一致的,test.txt文件在windows中如下图
第一方法,是对于字符串的对象或者是List<String> 的计算
第二种办法是擦用第三方依赖包,详情可以查看链接: https://gitee.com/wangwei1991/ram-usage-demo.
第三种办法需要用到 javaagent机制,这个打包的这个jar的源码: https://gitee.com/wangwei1991/java-agant.这个demo也比较简单,需要注意的是在启动应用程序的时候需要设置jvm参数,比如在eclipse中设置:
-javaagent:C:/Users/yaoayao/.m2/repository/com/wangwei/java-agant/0.0.1-SNAPSHOT/java-agant-0.0.1-SNAPSHOT.jar=Hello2
如下图
运行结果
从这个demo中可以得到很多结论:
- 文件的大小其实就是xxxx.getBytes().length
- 在磁盘中文件的大小并一定是在内存中的大小,因为java对内存结构做了优化,比如指针压缩减小了在内存中的占用空间
- 在整个demo中我计算的是str这个字符串在内存中的大小,其实可以计算任何类型对象的大小