边学边谈 ------- 当你遇到很多String对象 占用了很多内存 怎么办？

最新推荐文章于 2022-04-29 21:26:45 发布
最新推荐文章于 2022-04-29 21:26:45 发布
阅读量1k 收藏
点赞数
分类专栏： 学习与心得 文章标签： string hashmap 数据库 存储
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/jwhndsc/article/details/7673525
版权

最近在做一个项目， 用一个查询返回很多数据， 几十万条记录， 60多字段， 每个字段都是String, 如果都放在内存里 会占用很大空间。先不说数据库设计的优劣，也不说查询语句的对错（当然这语句由于需求也改不了），还是记录一下我是怎么解决这个问题的。

1. 增大VM的内存设置

2. 用String.intern() 让相同值的对象引用同一个字符串常量,以节省空间.

还有就是自己维护一个hashmap去存储这些重用的String.

 

上谷鹤
关注
专栏目录
全网最全-谷粒商城项目-面试总结-简历优化
成功最快的秘诀: 抱团取暖 。
09-20 28万+
该系用采用SpringCloud架构，利用SpringBoot构建应用，利用Nacos作为服务的注册、配置中心，利用OpenFeign实现与其他模块进行交互，利用Sentinel实现熔断降级和错误处理，利用Gateway作为服务网关，利用RabbitMQ实现延迟队列，利用Redis作为缓存解决读多写少的场景，利用MySQL进行持久化，利用MyBatisPlus作为持久化框架。
【SpringBoot】91、SpringBoot解决Mybatis-Plus生成雪花ID重复问题
最新发布
Asurplus
12-21 2815
只要 workerId 和 dataCenterId 不同时重复，生成的雪花 ID 就不会重复。这是因为每个 ID 都是唯一的，并且是根据特定的算法生成的
性能调优基础篇之内存中大量重复String对象
minna_D的专栏
08-11 923
String 为不可变对象， StringBuffer为可变对象。
String常量池对象过多导致系统性能下降
zhanshenyn的专栏
12-02 454
        最近工作中对系统进行调优，发现有一个后台任务执行后会导致logger打日志会变得很慢。经过层层分析，发现是任务代码中用到的阿里巴巴的fastjson框架中的SymbolTable对象中有大量String intern对象。 参考：http://tech.meituan.com/in_depth_understanding_string_intern.html   因为G...
StringBuffer优化String内存超限
qq_39020834的博客
07-28 660
StringBuffer可以优化String的内存超限（pat甲级1140的刷题笔记） import java.io.BufferedReader; import java.io.IOException; import java.io.InputStreamReader; public class test1140 { public static void main(String[] args) throws IOException{ BufferedReader br
生产环境频繁内存溢出，原来就是因为这个“String类”
华为云官方博客
03-30 1188
如果在程序中创建了比较大的对象，并且我们基于这个大对象生成了一些其他的信息，此时，一定要释放和这个大对象的引用关系，否则，就会埋下内存溢出的隐患。
js byte数组转string_JVM系列之:String,数组和集合类的内存占用大小
weixin_39603397的博客
12-02 729
简介之前的文章中，我们使用JOL工具简单的分析过String,数组和集合类的内存占用情况，这里再做一次更详细的分析和介绍，希望大家后面再遇到OOM问题的时候不再抱头痛哭，而是可以有章可循，开始吧。数组先看下JOL的代码和输出：//byte array log.info("{}",ClassLayout.parseInstance("www.flydean.com".getBytes()).toPr...
Go 学习笔记（31）— 字符串 string、字符 rune、字节 byte、UTF-8 和 Unicode 区别以及获取字符串长度
wohu1104的专栏
05-18 7693
1. 字符串 string 类型 Go 语言中字符串的内部实现使用 UTF-8 编码，通过 rune 类型，可以方便地对每个 UTF-8 字符进行访问。当然， Go 语言也支持按照传统的 ASCII 码方式逐字符进行访问。 字符串是常量，可以通过类似数组索引访问其字节单元，但是不能修改某个字节的值； var a string = "hello,world" b := a[0] a[1] = "a" // error 内置的 len 函数可以返回一个字符串中的字节数目（不是 rune 字符数目）
xxljob从入门到精通-全网段最全解说
热门推荐
lifetragedy的专栏
06-05 1万+
XXL-JOB特性一览 基本概念 xxljob解决的是以下几个痛点： 1） 跑批处理监控无法可视化，当前跑批的状态是：成功？失败？挂起？进度？为什么失败/原因？ 2）批处理任务不可重用，特别是无法对批处理任务做：定时？重复使用？频次？其中路由调度？ 3）批处理任务无法做到网格计算（特别像：websphere ibm grid computing）即批处理任务本身可以做成集群、fail over、sharding 由其是批处理任务可以做成“网格计算”这个功能，有了xxljob后你会发觉特别强大
Java基础学习总结（136）——有关流资源关闭（try-with-resources与AutoCloseable）的使用总结
科技D人生
10-17 3075
前言 做Java开发的都知道，每个资源的打开都需要对应的关闭操作，不然就会使资源一直占用而造成资源浪费，从而降低系统性能。关于资源的关闭操作，从JDK7-JDK9有了不少的提升及简化。我们来看看资源处理的变化。 一、JDK6 在JDK6及之前，每个资源都需要我们手动写代码关闭，如： FileInputStream fis = null; byte[] buffer = new byte[...
java 类的大小_java对象的大小
weixin_42129797的博客
02-16 348
原文出处：http://www.open-open.com/lib/view/open1423111722764.html最近在读《深入理解Java虚拟机》，对Java对象的内存布局有了进一步的认识，于是脑子里自然而然就有一个很普通的问题，就是一个Java对象到底占用多大内存？import java.lang.instrument.Instrumentation;import java.lang....
第十一章 “万金油”的String，为什么不好用了
JavaAlenboy
04-29 1284
第十一章 “万金油”的String，为什么不好用了 ? 为什么 String 类型内存开销大 ? 除了记录实际数据，String 类型还需要额外的内存空间记录数据长度、空间使用等信息，这些信息也叫作元数据。 所谓元数据信息，就是描述信息的信息。 当实际保存的数据较小时，元数据的空间开销就显得比较大了。 String 类型具体是怎么保存数据的呢 ? String中保存整数会用 int编码 方式， 而保存的数据是字符时会用 SDS(简单动态字符串) 结构体 来保存。 buf：字节数组，保存实际数据。
对象属性过多引起的内存开销大的问题
jcy7523的专栏
08-31 581
对大表取数据，应该加上需要使用的字段名。 如果数据量很大，从数据库查数据，然后映射到实体会耗费大量的时间。 对于需要缓存到内存中的实体，字段也需要按实际情况设置，不需要的字段应该删除。 比如： public class A implements Serializable{    private String name;    private String sex; private Str...
jvm 内存分析
每天进步一点点
08-11 703
jvm 内存分析
[c++]海量数据运行时提高程序运行效率、降低内存占用的方法
sihsd的博客
08-27 3479
降低内存的占用 1.慎用erase() 昨天我运行了一个数据，在对字符串的处理时使用了迭代器来对string对象进行遍历，并用string.erase()进行字符串的裁剪。这种办法对于少量数据来说是完全没问题的，但是一到大量数据，就会提示内存不足，甚至电脑性能不高的话，主板会被烧坏。（别问我怎么知道的o(￣︶￣)o） 出现这种情况的原因是erase对字符串（数组同理）进行除后，迭代器指向的是被删除的元素的下一个，而被删除的元素虽然在字符串中消失了，但是它的地址没有被释放掉，出现了野指针和内存泄漏。（自己的拙
解决C/C++内存堆积问题思路
sj_djw的博客
08-06 3037
1、弄清问题现象及发送场景，尝试复现问题。使用内存检测工具进行排查，比如使用valgrind工具进行内存检测 3、将现场出现内存泄露的进程生成coredump文件，使用gdb生成coredump文件 valgrind不支持调试已运行程序 5.4. Is it possible to attach Valgrind to a program that is already running? ...
记录一次线上系统OOM问题的解决过程
qq_42280920的博客
12-28 553
排查系统OOM问题实战啦，还不赶紧点进来看看
.net中清理内存，清理占用内存方式方法
weixin_30251587的博客
09-07 303
#region 内存回收 [DllImport("kernel32.dll", EntryPoint = "SetProcessWorkingSetSize")] public static extern int SetProcessWorkingSetSize(IntPtr process, int minSize, int maxSize); ...
JAVA String 类（一） 内存问题
不断的重建
01-20 442
与String相关的知识点 String的声明是final的，不可被继承 String 实现了Serializable接口：表示String支持序列化 String实现了Comparable：表示String可以比较大小 String 内部定义了final char[] value 用于存储字符串数据 String 为不可变字符序列（对现有字符串操作时，需重指定内存区域赋值，哪怕是调用replace（）方法） 字面量的方式赋值，字符串声明在常量池中，常量池中不存重复的量 new 对象时，对象在堆内存
C语言项目资源压缩包：tec-5h-master
C语言项目中会频繁使用标准库提供的函数，如 stdio.h 中的输入输出函数（printf、scanf）、stdlib.h 中的内存分配函数（malloc、free）、string.h 中的字符串操作函数等。在 "tec-5h" 项目的源代码中，我们可以预见...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值