- 博客(9)
- 资源 (1)
- 收藏
- 关注
RSS订阅
原创 Elasticsearch 简介
什么是ElasticsearchElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，能够达到实时、稳定、可靠、快速搜索。也可以看做是布式的实时文件存储，每个字段都能被索引并可被搜索。目前大多数公司把elasticsearch作为elk日志系统中日志数据储存和实时搜索工具。这一部分用户，他们注重的是数据的实时写入，在大量日志数据产生时，不...
2018-08-31 11:42:15
904
原创 服务器重启后j版本ceph osd无法启动报错 hunting for new mon
今天某个ceph集群重启了单个节点后，此节点某几个osd down了，通过ceph-disk activate无法重新拉起。并且异常osd全部返回日志hunting for new mon检查集群未发现任何异常。最后大佬建议重启osd服务 得以恢复。判断此次故障应该是 服务器重启后，osd服务启动异常，导致了osd无法加入集群...
2021-05-19 16:49:20
709
原创 如何查询elasticsearch中filed值为空的数据
在对es数据进行查询的时候，发现如果想查询某个字段值为空的时候,使用下面这种查询方式，会直接报错。GET INDEX_NAME/_search{ "query": { "term": { "FIELD_NAME": { "value": "" } } }废话不多说，直接给出正确的查询语句GET INDEX_NAM...
2019-06-26 15:31:02
2526
原创 服务器异常关机，启动yarn nodemanager 报错 Corruption: checksum mismatch 处理方法
偶遇服务器宕机，服务器中很多文件损坏，启动nodemanager时，一直报错，日志如下，感觉是某个文件损坏造成的2019-05-16 16:11:35,195 FATAL nodemanager.NodeManager (NodeManager.java:initAndStartNodeManager(549)) - Error starting NodeManagerorg.apache...
2019-05-16 16:20:06
1768
原创 服务器异常关机，启动yarn nodemanager 报错 CURRENT file does not end with newline 处理方法
偶遇服务器宕机，服务器中很多文件损坏，启动nodemanager时，一直报错，日志如下，感觉是某个文件损坏造成的2019-05-16 15:50:41,379 INFO service.AbstractService (AbstractService.java:noteFailure(272)) - Service NodeManager failed in state INITED; ...
2019-05-16 16:09:27
1935
原创 openstack手动迁移实例
1. 在dashboard上将需要迁移的实例上挂载的存储卷卸载掉2.在实例运行的原运算主机上， 切换到nova用户，并进入实例文件目录（默认是/var/lib/nova/instances/）3.将需要迁移的实例文件，通过scp传给迁移目的运算主机（提前将nova用户配置好相互免密登录）执行：scp -r 8b543a67-7fda-4db9-9b9a-ca2d5b5aa218 n...
2019-03-28 14:14:27
901
2
原创 elasticsearch logstash kibana elk集群搭建一键安装脚本
一、 前言 很多朋友在刚接触elk的时候，搭建测试集群会出现各种各样的问题，这里，我编写了一份elk集群安装脚本，分分钟让你完成elk的搭建。二、前期准备 我测试环境是centos7.2 ，在脚本中启动es和kibana的命令使用的是systemctl，使用centos6 的同学，自行修改。 脚本中会自动安装jdk1.8，请各位配置好yum源，没有yum的同...
2018-12-27 16:10:12
1472
原创 java日志 log4j 对接logstash 实操详解
一、 前言 java程序日志接入elk日志系统，我们最常用到的方案就是用filebeat或者是logstash读取java程序生成的日志文件，那么，我们是否可以忽略日志文件这个载体，直接让java日志传输到elk系统中呢？这里就讲解一下，如何配置，log4j对接logstash。二、log4j中的配置 在log4j配置中，有现成的logstash模块，配置的时候...
2018-12-11 15:14:34
6515
4
原创 filebeat+kafka集群+logstash集群解决方案详解
一、 前言在elk架构方案中，最常用到的方案就是，由filebeat采集数据传送至kafka集群，再用logstash集群消费kafka集群中的数据。这里就简单的讲解一下，使用这套方案时，如何配置filebeat和logstash。二、filebeat端的配置在这里filebeat中input如何配置就不多做讲解，不懂的自行百度，下面就看一下filebeat对接kafka集群，必填的几...
2018-10-09 14:55:46
14037
4
基于centos6.5 的 supervisor离线部署包
2019-06-19
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人