elasticsearch
vitaair
这个作者很懒,什么都没留下…
展开
-
elasticsearch-2.3.4 ik分词器
1. ik分词器跟es版本对照cd/work/elasticsearch/bin安装ik分词器plugin installhttps://github.com/medcl/elasticsearch-analysis-ik/releases/download/v1.9.4/elasticsearch-analysis-ik-1.9.4.zip 测试curl –XGET原创 2017-12-19 16:04:54 · 461 阅读 · 0 评论 -
Elasticsearch集群的脑裂问题
所谓脑裂问题(类似于精神分裂),就是同一个集群中的不同节点,对于集群的状态有了不一样的理解。今天,Elasticsearch集群出现了查询极端缓慢的情况,通过以下命令查看集群状态:curl -XGET 'es-1:9200/_cluster/health'发现,集群的总体状态是red,本来9个节点的集群,在结果中只显示了4个;但是,将请求发向不同的节点之后,我却发现即使是总体状态是red的,但是可...转载 2018-04-11 11:23:37 · 101 阅读 · 0 评论 -
python 3.4.3 下载安装与环境配置
下载: 我的操作系统是Windows 7 64bit,刚开始下载是Python 2.7后来因为要装PyQt5要下载 Python 3.5,由于个人系统的问题 Python 3.5暂时无法使用,故选择了Python 3.4.3 大家可以从官网下载:Python官网 我下载的已经打包上传到了CSD...转载 2018-04-12 10:42:02 · 2092 阅读 · 0 评论 -
logstash同步mysql到es 配置
0. 准备MySQL的驱动下载并拷贝mysql-connector-java-5.1.44-bin.jar到"/Elastic/logstash-6.0.0-beta2/lib/mysqldriver/mysql-connector-java-5.1.44-bin.jar"1. logstash配置文件 mysql.confinput { jdbc { jdbc_driver_...原创 2018-04-12 11:29:54 · 3724 阅读 · 0 评论 -
elasticsearch6.x ik分词器安装部署
一、下载ik安装包 https://github.com/medcl/elasticsearch-analysis-ik/releases 注:一定要与ES版本保持一致(我ES用的是6.0.0所以ik也要下载6.0.0),如下图:或者wget https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v6....转载 2018-04-12 13:14:06 · 7706 阅读 · 1 评论 -
Elasticsearch6.0及其head插件安装
Elasticsearch6.0及其head插件安装1.下载并解压elasticsearch2.修改elasticsearch.yml文件# 集群的名字 cluster.name: my-application# 节点名字 node.name: node-1 # 数据存储目录(多个路径用逗号分隔) path.data: /home/wjy/es/data # 日志目录 ...转载 2018-04-12 14:33:06 · 357 阅读 · 0 评论 -
Logstash实践: 分布式系统的日志监控
Logstash实践: 分布式系统的日志监控转自:http://www.jianshu.com/p/6575041b597d1. 前言服务端日志你有多重视?我们没有日志有日志,但基本不去控制需要输出的内容经常微调日志,只输出我们想看和有用的经常监控日志,一方面帮助日志微调,一方面及早发现程序的问题只做到第1点的,你可以洗洗去睡了。很多公司都有做到第2点和第3点,这些公司的服务端程序基本已经跑了很长...转载 2018-04-12 14:33:43 · 523 阅读 · 0 评论 -
elasticsearch权威指南-中文
elasticsearch权威指南-中文Table of Contents1. Introduction 2. 入门 i. 是什么 ii. 安装 iii. API iv. 文档 v. 索引 vi. 搜索 vii. 聚合 viii. 小结 ix. 分布式 x. 结语 3. 分布式集群 i. 空集群 ii. 集群健康 iii. 添加索引 iv. 故障转移 v. 横向扩展 vi. 更多扩展 vii. 应...转载 2018-04-12 14:35:08 · 3703 阅读 · 0 评论 -
Docker 部署环境下典型的 ELK 日志处理流程
摘要: 在开源的日志管理方案中,最出名的莫过于 ELK 了。ELK 是三个软件的合称:Elasticsearch、Logstash、Kibana。 Elasticsearch一个近乎实时查询的全文搜索引擎。Elasticsearch 的设计目标就是要能够处理和搜索巨量的日志数据。在开源的日志管理方案中,最出名的莫过于 ELK 了。ELK 是三个软件的合称:Elasticsearch、Logstas...转载 2018-04-12 14:36:41 · 777 阅读 · 0 评论 -
elasticsearch 集群
2015-10-10 09:56 by 轩脉刃, 21164 阅读, 1 评论, 收藏, 编辑elasticsearch 集群搭建elasticsearch的集群现在假设我们有3台es机器,想要把他们搭建成为一个集群基本配置每个节点都要进行这样的配置:cluster.name: baichebao-cluster这个是配置集群的名字,为了能进行自动查找node.name: "baichebao-n...转载 2018-04-11 11:21:47 · 117 阅读 · 0 评论 -
ELK(ElasticSearch, Logstash, Kibana)搭建实时日志分析平台
ELK平台介绍在搜索ELK资料的时候,发现这篇文章比较好,于是摘抄一小段:以下内容来自:http://baidu.blog.51cto.com/71938/1676798日志主要包括系统日志、应用程序日志和安全日志。系统运维和开发人员可以通过日志了解服务器软硬件信息、检查配置过程中的错误及错误发生的原因。经常分析日志可以了解服务器的负荷,性能安全性,从而及时采取措施纠正错误。通常,日志被分散的储存...转载 2018-04-03 08:38:19 · 88 阅读 · 0 评论 -
ELK原理与介绍
为什么用到ELK:一般我们需要进行日志分析场景:直接在日志文件中 grep、awk 就可以获得自己想要的信息。但在规模较大的场景中,此方法效率低下,面临问题包括日志量太大如何归档、文本搜索太慢怎么办、如何多维度查询。需要集中化的日志管理,所有服务器上的日志收集汇总。常见解决思路是建立集中式日志收集系统,将所有节点上的日志统一收集,管理,访问。一般大型系统是一个分布式部署的架构,不同的服务模块部署在...转载 2018-04-11 11:21:58 · 495 阅读 · 0 评论 -
elasticsearch-6.2.2安装错误解决方案
1:error='Cannot allocate memory'[plain] view plain copy[root@centos7.4-64 elasticsearch-6.2.2]# ./bin/elasticsearch -d Java HotSpot(TM) 64-Bit Server VM warning: INFO: os::commit_memory(0x00000000c53...转载 2018-04-02 10:49:42 · 3542 阅读 · 0 评论 -
Linux环境下elasticsearch-6.2.2安装以及配置
Elasticsearch是一个开源的高扩展的分布式全文检索引擎,它可以近乎实时的存储、检索数据;本身扩展性很好,可以扩展到上百台服务器,处理PB级别的数据。 Elasticsearch也使用Java开发并使用Lucene作为其核心来实现所有索引和搜索的功能,但是它的目的是通过简单的RESTful API来隐藏Lucene的复杂性,从而让全文搜索变得简单。安装Elasticsearch-6.2.2...转载 2018-04-02 10:49:20 · 1195 阅读 · 0 评论 -
elasticsearch常见问题总结
1、unable to install syscall filter:Java.lang.UnsupportedOperationException:seccomp unavailable: requires kernel 3.5+ with CONFIG_SECCOMPandCONFIG_SECCOMP_FILTERcompiledinatorg.elasticsearch.bootstrap....转载 2018-04-02 10:49:12 · 304 阅读 · 0 评论 -
elasticsearch6.x环境安装
1. 安装配置JDK 8(1)下载并解压缩[root@node1 ~]# tar -zxvf jdk-8u112-linux-x64.tar.gz -C /opt1(2)编辑环境变量 vi /etc/profile.d/custom.sh[root@node1 ~]# vi /etc/profile.d/custom.sh[root@node1 ~]# cat /etc/profile.d/cu...转载 2018-04-02 10:49:02 · 2870 阅读 · 0 评论 -
elasticsearch-5.5.1的环境搭建
1、获取ES安装包#cd /soft/es/#wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-5.5.1.zip或者通过xshell rz命令从windows上传elasticsearch-5.5.1.zip到linux服务器2、解压#unzip elasticsearch-5.5.1.zip3、新建一...转载 2018-04-02 10:49:55 · 643 阅读 · 0 评论 -
ElasticSearch5+logstash的logstash-input-jdbc实现mysql数据同步
在实现的路上遇到了各种坑,再次验证官方文档只能产考不能全信!ElasticSearch安装就不说了上一篇有说!安装logstash官方:https://www.elastic.co/guide/en/logstash/current/installing-logstash.html1.下载公共密钥rpm --import https://artifacts.elastic.co/GPG-KEY-e...转载 2018-04-08 09:58:05 · 93 阅读 · 0 评论 -
elasticsearch5.4.2安装以及插件head的安装过程
在安装elasticsearch前先配置下系统环境。elasticsearch5后需要运行在JDK8及以上版本,下载安装jdk8并配置环境变量此处不再累述一、安装ElasticSearch1、下载elasticsearch并解压[html] view plain copy在线下载:wget https://artifacts.elastic.co/downloads/elasticsearch/e...转载 2018-04-02 14:03:10 · 129 阅读 · 0 评论 -
安装 Kibana5.5.1
先去官网下载对应版本的Kibana,或者直接wget(版本根据自己需求修改):[root@lijie elk]# wget https://artifacts.elastic.co/downloads/kibana/kibana-5.5.1-linux-x86_64.tar.gz1解压:[root@lijie elk]# tar -xzvf kibana-5.5.1-linux-x86_64.ta...转载 2018-04-11 11:22:09 · 564 阅读 · 0 评论 -
elasticsearch 报错处理
bug:[2017-10-26T08:58:07,869][INFO ][o.e.d.z.ZenDiscovery ] [es01] failed to send join request to master [{es02}{igB6u1OVTWmGehZINgTv4Q}{ColiUXOCQFmoh0zPYwXDhg}{192.168.210.7}{192.168.210.7:9300}], re...转载 2018-04-13 15:43:17 · 766 阅读 · 0 评论