es-5数据同步

最新推荐文章于 2024-08-20 21:37:13 发布

-yanhui-

最新推荐文章于 2024-08-20 21:37:13 发布

阅读量460

点赞数

分类专栏： es 文章标签： elasticsearch 大数据搜索引擎

本文链接：https://blog.csdn.net/xyh930929/article/details/125598294

版权

向ES里面添加数据

logstash
kabina
javaapi
restful api

重点介绍一下logstash，是一个数据同步工具，可以动态地将来自不同数据源的数据统一起来，并将数据标准化到其他任何数据源。

其实最常见的使用场景是将各个数据源同时同步到es。有点像八爪鱼转换器：

在这里插入图片描述

举例说明：

mysql->mysql
https://blog.csdn.net/xyh930929/article/details/10119773
mysql->es，只要select后面的字段与es里面field的字段对上就行。

input {
   
    #stdin {
   
    #}
    jdbc {
   
        jdbc_connection_string => "jdbc:mysql://localhost:3306/XXX?serverTimezone=Asia/Shanghai&useUnicode=true&characterEncoding=utf8&useSSL=false&allowMultiQueries=true"
        jdbc_user => "matrix_db"
        jdbc_password => "c3I44dfWkm&CyfdNiL2rp"
        jdbc_driver_library =