使用JMC工具对spark 程序调优(一)

spark调优是一个头疼的事,这个疼在什么地方呢?
(1)spark将内部几乎完全封装,类似黑箱,不了解内部机理
(2)spark 调优参数众多,参数之间关联很多,无法清晰知道调优效果
(3)spark运行在集群上,本地调试功能有限

如果谁能精通这三项,那就很厉害了,是不是?实际情况中,我们需要找出调优项,执行,并能看到明确的效果。为了调优,除了绞尽脑汁,钻研黑箱,还可以通过一些工具,提高效率。这里的主角,便是JMC工具。接下来的主要内容,就是如何使用JMC工具对spark程序调优。


JMC重点功能介绍

接下来,先介绍我们要使用的功能点,这些功能点将在调优中发挥重要作用。

(1)MBean服务器功能介绍

  1. 概览
  2. 触发器
    以一个Tomcat程序为例,打开概览,添加我的图表:
    添加我的图表

这里选择“Free Java Heap Memory”属性,我的图表1:

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值