搭建Elasticsearch服务环境并实现与mysql数据的同步

安装logstash（用于数据同步）

下载地址：https://www.elastic.co/cn/downloads/logstash。解压后修改logstash 文件夹下Gemfile文件，将source改为：https://gems.ruby-china.org

安装logstash-input-jdbc

进入logstash/bin，执行logstash-plugin install logstash-input-jdbc。

准备同步相关文件

在bin目录下创建lib目录，放入mysql-connector-java.jar

地址：https://dev.mysql.com/downloads/file/?id=480090

在bin目录中新建jdbc.sql文件，加入和同步数据相关的sql语句

在config目录中新建logstash.conf文件，内容如下：

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30

input {     stdin {     }     jdbc {       # mysql jdbc connection string to our backup databse       jdbc_connection_string => "jdbc:mysql://192.168.0.113:3306/telecom?characterEncoding=utf8"       # the user we wish to excute our statement as       jdbc_user => "root"       jdbc_password => "****"       # the path to our downloaded jdbc driver       jdbc_driver_library => "lib\mysql-connector-java-5.1.38.jar"       # the name of the driver class for mysql       jdbc_driver_class => "com.mysql.jdbc.Driver"       jdbc_paging_enabled => "true"       jdbc_page_size => "50000"       statement_filepath => "jdbc.sql"       schedule => "* * * * *"     } }   output {     elasticsearch {         hosts => ["192.168.0.113:9200"]         index => "索引名"         document_type => "索引类型名"     }     stdout {         codec => json_lines     } }

6、执行数据同步命令

进入bin目录，执行logstash.bat -f  ../config/logstash.conf

 

参考链接：https://www.cnblogs.com/a-du/p/7611620.html