启动broker报错
虚拟机内存小,导致虚拟机中的JVM内存小,进而在启动broker时分配JVM内存遇到问题查询网上得知,查看/usr/local/rocketmq-all-4.3.0/distribution/target/apache-rocketmq/bin/runbroker.sh的配置参数,修改即可
vim bin/runbroker.sh 编辑broker启动参数配置
可以看到,默认情况下设置的堆最大大小和初始大小都为8g,年轻代设置为4g,根据自己的服务器内存修改:比如我修改后的内容为 1g 1g 512m,修改完内存参数后,启动broker即可。
修改启动文件配置
修改bin/runserver.sh,调整里面的jvm内存配置。找到下面这一行调整下内存
JAVA_OPT="${JAVA_OPT} -server -Xms512m -Xmx512m -Xmn256m -XX:MetaspaceSize=128m -XX:MaxMetaspaceSize=320m"
RocketMQ系统参数调优
- 配置RocketMQ的JVM内存大小
JAVA_OPT="${JAVA_OPT} -XX:+UseG1GC -XX:G1HeapRegionSize=16m - XX:G1ReservePercent=25 -XX:InitiatingHeapOccupancyPercent=30 - XX:SoftRefLRUPolicyMSPerMB=0"
JAVA_OPT="${JAVA_OPT} -verbose:gc - Xloggc:${GC_LOG_DIR}/rmq_broker_gc_%p_%t.log -XX:+PrintGCDetails - XX:+PrintGCDateStamps -XX:+PrintGCApplicationStoppedTime - XX:+PrintAdaptiveSizePolicy"
JAVA_OPT="${JAVA_OPT} -XX:+UseGCLogFileRotation -XX:NumberOfGCLogFiles=5 - XX:GCLogFileSize=30m"
-XX:+UseG1GC: 使用G1垃圾回收器
-XX:G1HeapRegionSize=16m 将G1的 region块大小设为16M
-XX:G1ReservePercent:在G1的老年代中预留25%空闲 内存,这个默认值是10%,RocketMQ把这个参数调大了。
- XX:InitiatingHeapOccupancyPercent=30:当堆内存的使用率达到30%之后就会 启动G1垃圾回收器尝试回收垃圾,默认值是45%,RocketMQ把这个参数调小了, 也就是提高了GC的频率,但是避免了垃圾对象过多,一次垃圾回收时间太长的问 题。
然后,后面定制了GC的日志文件,确定GC日志文件的地址、打印的内容以及控制 每个日志文件的大小为30M并且只保留5个文件。这些在进行性能检验时,是相当重 要的参考内容。
2: RocketMQ的其他一些核心参
例如在conf/dleger/broker-n0.conf中有一个参数:
sendMessageThreadPoolNums=16
这一个参数是表明RocketMQ内部用来发送 消息的线程池的线程数量是16个,其实这个参数可以根据机器的CPU核心数进行适 当调整,例如如果你的机器核心数超过16个,就可以把这个参数适当调大。
3: Linux内核参数定制
我们在部署RocketMQ的时候,还需要对Linux内核参数进行一定的定制。例如 ulimit,需要进行大量的网络通信和磁盘IO。
vm.extra_free_kbytes,告诉VM在后台回收(kswapd)启动的阈值与直接回 收(通过分配进程)的阈值之间保留额外的可用内存。RocketMQ使用此参数来 避免内存分配中的长延迟。
(与具体内核版本相关) vm.min_free_kbytes,如果将其设置为低于1024KB,将会巧妙的将系统破 坏,并且系统在高负载下容易出现死锁。 vm.max_map_count,限制一个进程可能具有的最大内存映射区域数。 RocketMQ将使用mmap加载CommitLog和ConsumeQueue,因此建议将为此
JAVA_OPT="${JAVA_OPT} -XX:+UseG1GC -XX:G1HeapRegionSize=16m - XX:G1ReservePercent=25 -XX:InitiatingHeapOccupancyPercent=30 - XX:SoftRefLRUPolicyMSPerMB=0" JAVA_OPT="${JAVA_OPT} -verbose:gc - Xloggc:${GC_LOG_DIR}/rmq_broker_gc_%p_%t.log -XX:+PrintGCDetails - XX:+PrintGCDateStamps -XX:+PrintGCApplicationStoppedTime - XX:+PrintAdaptiveSizePolicy" JAVA_OPT="${JAVA_OPT} -XX:+UseGCLogFileRotation -XX:NumberOfGCLogFiles=5 - XX:GCLogFileSize=30m" 1 2 3 参数设置较大的值。
vm.swappiness,定义内核交换内存页面的积极程度。较高的值会增加攻击 性,较低的值会减少交换量。建议将值设置为10来避免交换延迟。 File descriptor limits,RocketMQ需要为文件(CommitLog和 ConsumeQueue)和网络连接打开文件描述符。我们建议设置文件描述符的值 为655350。