内存调优汇总

Java启动参数与内存调优一些学习笔记
https://blog.csdn.net/rishengcsdn/article/details/40301015

Vmstat命令详解:查看系统与用户占cpu比率,排除线程频繁切换状况
https://www.cnblogs.com/tommyli/p/3746187.html


查看Spark进程的JVM配置及内存使用
https://blog.csdn.net/nysyxxg/article/details/76515940

1、通过ps命令查询PID
2、使用jinfo命令查询该进程的JVM参数设置
3、使用jmap查看进程中内存分代使用的情况
4、堆大小参考:jmap -heap pid


Linux监控命令
http://man.linuxde.net/ifstat


spark jvm调优笔记
https://blog.csdn.net/lw_ghy/article/details/52946136

Spark性能优化总结
https://blog.csdn.net/ainidong2005/article/details/53152605

yarn 配置log4j日志输出
https://blog.csdn.net/mtj66/article/details/53885496

强制GC日志
jmap -histo:live pid

Spark中分组后的TopN,以及Spark的优化(二阶段聚合groupBy)
http://www.mamicode.com/info-detail-1696507.html

Spark Shuffle FetchFailedException解决方案
https://blog.csdn.net/lsshlsw/article/details/51213610

Spark性能调优:使用Kryo序列化库、RDD的压缩
https://blog.csdn.net/leen0304/article/details/78732171
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值