logstash同步数据库数据到ES中

最新推荐文章于 2024-08-17 13:50:57 发布

高冷的自卑患者

最新推荐文章于 2024-08-17 13:50:57 发布

阅读量1.7k

点赞数 1

分类专栏： elk 文章标签： logstash 同步数据 ES

本文链接：https://blog.csdn.net/wgh_930708/article/details/90448519

版权

这篇博客详细介绍了如何使用Logstash将数据库数据同步到ES。首先，需要在logstash目录创建driver文件夹并放入数据库驱动ojdbc6.jar。然后，配置jdbc.conf文件设置同步参数。最后，在bin目录下通过logstash.bat命令启动同步进程。在实施过程中要注意，配置文件中数据库驱动的类名前需正确添加Java::前缀，否则会导致启动错误。

摘要由CSDN通过智能技术生成

logstash同步数据到ES

logstash配置说明

logstash配置说明

环境准备

在logstash目录中新建文件夹driver；
把数据库驱动包复制到driver文件夹下(ojdbc6.jar)；

配置文件

新建配置文件jdbc.conf；
该配置文件的内容如下：

input{
    jdbc{
		# 数据库驱动包存放路径
        jdbc_driver_library => "D:\logstash-5.6.9\lib\ojdbc6.jar"
		# 数据库驱动器；
        jdbc_driver_class => "Java::oracle.jdbc.driver.OracleDriver"
		# 数据库连接方式
        jdbc_connection_string => "jdbc:oracle:thin:@192.168.1.1:1521:test"
		# 数据库用户名
        jdbc_user => "admin"
		# 数据库密码
        jdbc_password => "admin"
		# 数据库重连尝试次数
		connection_retry_attempts => "3"
		# 判断数据库连接是否可用，默认false不开启
		jdbc_validate_connection => "true"
		# 数据库连接可用校验超时时间，默认3600s
		jdbc_validation_timeout => "3600"
		# 开启分页查询（默认fal