springboot集成Elasticsearch、kibana、logstash

最新推荐文章于 2024-07-27 15:46:25 发布

小石潭记丶

最新推荐文章于 2024-07-27 15:46:25 发布

阅读量3.5k

点赞数 2

分类专栏： Elasticsearch springboot

本文链接：https://blog.csdn.net/qq_33371766/article/details/103322707

版权

springboot 同时被 2 个专栏收录

100 篇文章 11 订阅

订阅专栏

Elasticsearch

3 篇文章 0 订阅

订阅专栏

1.安装Elasticsearch

https://www.elastic.co/cn/downloads/past-releases/elasticsearch-6-3-2

下载对应的版本：

解压运行es.bat

D:\workTool\elasticsearch-6.3.2\bin

启动完成直接访问连接：127.0.0.1:9200

es启动成功！

2.安装Kibana 和es对应的版本号

https://www.elastic.co/cn/downloads/past-releases/kibana-6-3-2

3.解压运行kibana.bat（先启动es，再启动kibana）

D:\workTool\kibana-6.3.2-windows-x86_64\bin

上面的是没有安装分词器的效果。

3.1.下载ik分词器

https://github.com/medcl/elasticsearch-analysis-ik/releases?after=v6.4.2（下载对应的版本）

将ik分词器解压放到es的plugin中

以上是ik分词器的两种方式.

4.下载logstash（版本都是统一的6.3.2）（用于同步mysql和es的数据）

https://www.elastic.co/cn/downloads/past-releases/logstash-6-3-2

4.1 启动logstash 这里会有一些坑：

参考https://blog.csdn.net/u011174699/article/details/101927523

https://blog.csdn.net/huiyunfei/article/details/89496407

java的jdk配置路径不能有空格（我这里本机配置在C:\Program Files\Java）错误示范

4.2 接下来创建mysqlconfig文件夹

mysql.conf

input {
    stdin{
    }
    jdbc {
        # mysql 数据库连接
        jdbc_connection_string => "jdbc:mysql://localhost:3306/es?useUnicode=true&characterEncoding=utf-8&serverTimezone=UTC"
        jdbc_user => "root"
        jdbc_password => "root"
        # 驱动配置
        jdbc_driver_library => "D:\workTool\logstash-6.3.2\mysqlconfig\mysql-connector-java-5.1.44-bin.jar"
        jdbc_driver_class => "com.mysql.jdbc.Driver"
        jdbc_paging_enabled => "true"
        jdbc_page_size => "50000"
        # 执行的sql文件
        statement_filepath => "D:\workTool\logstash-6.3.2\mysqlconfig\blog.sql"
         # 设置监听 各字段含义 分 时 天 月  年 ，默认全部为*代表含义：每分钟都更新
        schedule => "* * * * *"
        # 索引类型
        type => "blog"
    }
}


output {
    elasticsearch {
        #es服务器
        hosts => ["localhost:9200"]
        # es索引名称
        index => "sl_blog"
        #id自增长
        document_id => "%{id}"
    }
    
    stdout {
        codec => json_lines
    }
}

创建数据库es、创建表

CREATE TABLE `t_blog` (
  `id` varchar(32) CHARACTER SET utf8 COLLATE utf8_unicode_ci NOT NULL,
  `title` varchar(32) DEFAULT NULL,
  `create_time` datetime DEFAULT NULL,
  `content` varchar(2000) DEFAULT NULL,
  PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;

INSERT INTO `t_blog` VALUES ('1', '中国', '2019-04-24 15:22:30', '中国当自强');
INSERT INTO `t_blog` VALUES ('2', 'myblog', '2019-04-24 15:22:50', 'my blog content');
INSERT INTO `t_blog` VALUES ('3', '上海', '2019-04-24 15:23:08', '中国上海');
INSERT INTO `t_blog` VALUES ('4', '成都', '2020-01-03 01:48:15, '四川省会');