ELK
关注
分享
扫一扫
ljj234567
think
展开
-
Logstash安装logstash-integration-jdbc
Logstash安装logstash-integration-jdbc1.版本说明logstash7.10.12.前置条件logstash-integration-jdbc是使用ruby语言开发的，因此需安装gem，gem是Ruby的一个包管理器3.替换国内镜像gem source --remove https://rubygems.org/gem source --add https://gems.ruby-china.com/**注：**网上主要说替换为https://ruby原创 2021-03-17 10:24:42 · 892 阅读 · 0 评论 -
ElasticSearch bulk批量插入数据
环境：使用RestHighLevelClient进行bulk操作代码如下：/** * es 批量存数据的方法 * 1.创建es clent * 2.创建bulk请求体 * 3.向bulk请求体中添加多个数据 * 4.发起rest请求 * 5.关闭client * @throws IOException */...原创 2018-12-06 16:59:50 · 7331 阅读 · 1 评论 -
java编写es搜索程序
开发环境：java8 springboot pom文件导入依赖 <!--ES所需依赖--> <dependency> <groupId>org.elasticsearch.client</groupId> <artifactId>transpor...原创 2018-12-04 11:35:58 · 903 阅读 · 0 评论 -
logstash将mysql中的数据同步到es中，增量实时保存
编写demo.confinput { jdbc { type => "student" jdbc_driver_library => "/home/ljj/software/logstash-6.3.1/tools/mysql-connector-java-5.1.46/mysql-connector-java-5.1.46.jar" jdbc_dri...原创 2018-12-04 11:21:15 · 1200 阅读 · 0 评论 -
logstash收集java程序日志，并保存到es中
说明：收集多个java程序的日志，并输出到es中。 编辑logstash的conf文件vim log.conf配置文件内容如下：input { file { start_position => end ### 读文件的位子 path => "/root/projects/fp-ap...原创 2018-12-04 11:09:34 · 5138 阅读 · 2 评论 -
logstash常用指令
读取配置文件bin/logstash -f /etc/logstash.d/*.conf 测试配置文件是否通过bin/logstash -t /etc/logstash.d/*.conf 对所有命令参数进行配置$LS_HOME/config/logstash.yml 安装/升级插件bin/logstash-plugin install logstash-ou...原创 2018-11-14 21:35:55 · 1007 阅读 · 0 评论 -
elasticsearch 编写java程序报错Exception in thread "main" java.lang.NoClassDefFoundError: org/elasticsearch
java程序启动报错：Exception in thread "main" java.lang.NoClassDefFoundError: org/elasticsearch/plugins/NetworkPluginERROR StatusLogger Log4j2 could not find a logging implementation. Please add log4j-cor...原创 2018-11-14 21:27:22 · 5045 阅读 · 0 评论 -
ES启动常见错误
转载地址：https://blog.csdn.net/u013083576/article/details/784998841、unable to install syscall filter：Java.lang.UnsupportedOperationException:seccomp unavailable: requires kernel 3.5+ with CONFIG_SECCOMP...转载 2018-11-13 15:52:40 · 3830 阅读 · 0 评论 -
elasticsearch 启动报错 Exception in thread "main" java.nio.file.AccessDeniedException:
系统：操作centos7 (虚拟机)./bin/elasticsearch，启动报错[es1@es1 software]$ ./elasticsearch-6.3.1/bin/elasticsearchException in thread "main" java.nio.file.AccessDeniedException: /home/es1/software/elasticsea...原创 2018-11-05 13:48:56 · 15876 阅读 · 0 评论 -
elasticsearch数据类型
Elasticsearch自带的数据类型是Lucene索引的依据，也是我们做手动映射调整到依据。 映射中主要就是针对字段设置类型以及类型相关参数。1.JSON基础类型如下： 字符串：string 数字：byte、short、integer、long、float、double 时间：date 布尔值: true、false 数组: ar...原创 2018-10-30 21:39:33 · 1217 阅读 · 0 评论 -
elasticsearch中mapping中的可设置的属性
mappings ： 在index（库）下创建时使用，下面可以有多个mapping 以下数据结构主要针对每个mapping进行说明：一级属性 二级属性 三级属性 说明 dynamic 新增字段自动模式；true:表示自动识别新字段并创建索引，false:不自动索引新字段，strict:遇到未知字段，抛异常，不能存入 _timestamp ...原创 2018-10-30 20:58:59 · 2051 阅读 · 0 评论 -
elasticsearch启动报错
系统：操作centos7 (虚拟机)./bin/elasticsearch，启动报错[es1@es1 software]$ ./elasticsearch-6.3.1/bin/elasticsearchException in thread "main" java.nio.file.AccessDeniedException: /home/es1/software/elasticsea...原创 2018-10-30 20:52:28 · 986 阅读 · 0 评论