- 博客(7)
- 收藏
- 关注
RSS订阅原创 JVM参数配置
最近团队在调JVM参数优化，贴一下某些整理的参数列表和解释JVM参数配置解释-serverC2引擎执行-Xms20g最小堆内存20G-Xmx20g最大堆内存20G-Xmn8g新生代8G-XX:PermSize=256mPerm大小256MB-XX:MaxPermSize=256mPerm大小256MB-XX:SurvivorRa...
2019-04-01 19:52:32
155
原创 jvm GC回收-CMS
Concurrent Mark-Sweep总体介绍：CMS(Concurrent Mark-Sweep)是以牺牲吞吐量为代价来获得最短回收停顿时间的垃圾回收器。对于要求服务器响应速度的应用上，这种垃圾回收器非常适合。在启动JVM参数加上-XX:+UseConcMarkSweepGC ，这个参数表示对于老年代的回收采用CMS。CMS采用的基础算法是：标记—清除。2.CMS过程：初始标记(S...
2019-04-01 19:49:23
173
原创 kafka service端配置参数和监控指标
Kafka 配置参数统计kafka参数项解释默认值broker.id服务的brokerIdmessage.max.bytes服务可以接受的最大的消息体大小1000000+4（MessageSizeLength）+8（OffsetLength）num.network.threadsserver端用于处理网络请求的线程数3num.io.thread...
2019-04-01 19:47:38
799
原创 Spark的内存模型
Spark的内存模型Spark内存模型Spark内存模型详细了解说明了由于kafka内存管理记录的内存使用量不能精确计算导致OOM高发内存模型分为静态内存管理&统一内存管理，使用spark.memory.useLegacyMode来配置，在1.6前的静态内存管理StaticMemoryManager统一内存管理UnifiedMemoryManager内存动态占用机制...
2019-04-01 19:45:27
1668
原创 metrics简单简绍
metrics是一个JAVA的度量工具包，可以方便的服务进行监控和统计。目前最为流行的metrics库来自Coda Hale的dropwizard/metrics,这个库被多个知名的开源项目使用。metrics的简单使用可以参考这里，官方文档MetricRegistryMetricRegistry是metrics的核心类，是用来注册多个度量工具的地方。源码如下：public class Metric
2017-12-09 15:59:18
1999
原创 Hadoop2.6下OIV源码分析
Hadoop2.6下OIV源码分析首先我们看下官方是如何介绍OIV的 The Offline Image Viewer is a tool to dump the contents of hdfs fsimage files to a human-readable format and provide read-only WebHDFS API in order to allow offline
2017-11-27 21:43:55
621
原创 Hadoop2.6版本的FSImage结构解析
理解FSImage，首先需要理解INode。下面是Hadoop2.6.0下的INode类图。INode的源码如下public abstract class INode implements INodeAttributes, Diff.Elementbyte[]>, AuthorizationProvider.INodeAuthorizationInfo
2017-11-19 21:57:04
1553
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人