elasticsearch-jdbc

es-jdbc是一个将关系型数据库数据导入es库的工具,支持mysql、oracle等。

1.下载zip包。

http://xbib.org/repository/org/xbib/elasticsearch/importer/elasticsearch-jdbc/

2.解压.

3.添加驱动

es-jdbc默认带了mysql的driver,如果要添加其他数据库的driver,只需将对应的driver加到es-jdbc/lib目录下即可。

4.切换到es-jdbc/bin目录下,在此目录下编写你的运行脚本(不一定非要在bin目录下)。

es-jdbc中常用的参数

1.strategy

jdbc导入的策略,当前实现了“standard” "column"两种方式。

2.url

连接数据库的url。

3.user

连接数据库的用户名。

4.password

连接数据库的密码。

5.sql

要执行的sql。

6.type

定义连接的类型,默认就是jdbc。

7.index

定义导入到es库中的索引名

8.statefile

定义结果输出文件名

9.ignore_null_true

是否忽略关系型数据库中的空值。

10.elasticsearch

定义连接的es集群信息,其中cluster说明集群的名称,host说明集群中的master节点的主机,port说明通信端口,autodiscover说明是否自动发现集群中的其他节点。

bin=$JDBC_IMPORTER_HOME/bin
lib=$JDBC_IMPORTER_HOME/lib
echo '{
    "type" : "jdbc",
    "jdbc" : {
        "url" : "jdbc:mysql://localhost:3306/test",
        "user" : "",
        "password" : "",
        "sql" : "select *, id as _id from orders"
    }
}' | java \
       -cp "${lib}/*" \
       -Dlog4j.configurationFile=${bin}/log4j2.xml \
       org.xbib.tools.Runner \
       org.xbib.tools.JDBCImporter

详细参数配置:https://github.com/lissic/elasticsearch-jdbc


阅读更多

扫码向博主提问

chs007chs

非学,无以致疑;非问,无以广识
  • 擅长领域:
  • java
  • linux
去开通我的Chat快问
个人分类: 大数据与云计算
上一篇c extern关键字
下一篇elasticsearch-head
想对作者说点什么? 我来说一句

没有更多推荐了,返回首页

关闭
关闭
关闭