kibana几次崩溃问题引发的探索(1),层层深入

先自我介绍一下,小编浙江大学毕业,去过华为、字节跳动等大厂,目前阿里P7

深知大多数程序员,想要提升技能,往往是自己摸索成长,但自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!

因此收集整理了一份《2024年最新软件测试全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友。
img
img
img
img
img

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上软件测试知识点,真正体系化!

由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新

如果你需要这些资料,可以添加V获取:vip1024b (备注软件测试)
img

正文

此文仅作为本人网络日志,记录工作学习经验以备忘。并非教程、论文或心得。

问题

近两天每天早上回来发现测试机上kibana的进程消失了

假设

因为之前在1G内存的机器上跑ELK时,如果安装了x-pack就会导致启动kibana时elasticsearch崩溃掉,并且在扩大内存之后问题解决,因此假设问题在于out of memory

目的

elasticsearch占用内存比较大,网上大多优化配置是加大elasticsearch的内存配置,锁住内存交换等方法以提高性能。但是现在我先要做的是,尽量减小elastic资源消耗,以保证我机器上其他程序的正常运行。因此与这些优化的目的相反。

实验与分析

首先在$ES_HOME(elasticsearch目录)/config下有3个配置文件,其中jvm打头的配置中配置JVM相关设置,其中:

################################################################

IMPORTANT: JVM heap size

######################################################

You should always set the min and max JVM heap

size to the same value. For example, to set

the heap to 4 GB, set:

-Xms4g

-Xmx4g

要求这里初始化(最小)内存和最大内存需要设置一样,我虚拟机目前配置的2G内存,希望留给其他程序足够的空间,这里设置为1g:

-Xms1g
-Xmx1g

这样跑下来内存占用:

是超过了我设置的值的。因此我想试试bootstrap.memory_lock: true 这个设置
在Memory中去掉该设置的注释:

----------------------------------- Memory -----------------------------------

Lock the memory on startup:

bootstrap.memory_lock: true

Make sure that the heap size is set to about half the memory available

on the system and that the owner of the process is allowed to use this

limit.

Elasticsearch performs poorly when the system is swapping the memory.

设置了这个属性之后,不再回使用内存交换,即从读写虚存,而虚存实际上是硬盘读写,效率比内存低得多,一般开启这个选项是为了提高性能.然后就出问题了,后台启动elastic过一阵进程自动消失,查看日志发现

[2017-11-17T11:21:16,128][INFO ][o.e.n.Node ] [es_node1] starting …
[2017-11-17T11:21:16,447][INFO ][o.e.t.TransportService ] [es_node1] publish_address {192.168.5.233:9300}, bound_addresses {192.168.5.233:9300}
[2017-11-17T11:21:16,457][INFO ][o.e.b.BootstrapChecks ] [es_node1] bound or publishing to a non-loopback or non-link-local address, enforcing bootstrap checks
[2017-11-17T11:21:16,458][ERROR][o.e.b.Bootstrap ] [es_node1] node validation exception
[1] bootstrap checks failed
[1]: memory locking requested for elasticsearch process but memory is not locked
[2017-11-17T11:21:16,523][INFO ][o.e.n.Node ] [es_node1] stopping …
[2017-11-17T11:21:16,741][INFO ][o.e.n.Node ] [es_node1] stopped

网上学习资料一大堆,但如果学到的知识不成体系,遇到问题时只是浅尝辄止,不再深入研究,那么很难做到真正的技术提升。

需要这份系统化的资料的朋友,可以添加V获取:vip1024b (备注软件测试)
img

一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!
8959958)]

一个人可以走的很快,但一群人才能走的更远!不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值