Vertica是一款基于列存储的MPP架构的数据库,Vertica Reader插件实现了从Vertica读取数据的功能。本文为您介绍Vertica Reader的实现原理、参数和示例。
注意 Vertica Reader仅支持使用独享数据集成资源组,不支持使用默认资源组和自定义资源组。
实现原理
在底层实现上,Vertica Reader通过JDBC连接远程Vertica数据库,并执行相应的SQL语句,从Vertica数据库中读取数据。
Vertica Reader通过JDBC连接器连接至远程的Vertica数据库,根据您配置的信息生成查询SQL语句,发送至远程Vertica数据库,执行该SQL并返回结果。然后使用数据同步自定义的数据类型拼装为抽象的数据集,传递给下游Writer处理。
对于您配置的table、column和where等信息,Vertica Reader将其拼接为SQL语句发送至Vertica数据库。
对于您配置的querySql信息,Vertica直接将其发送至Vertica数据库。
Vertica Reader通过Vertica数据库驱动访问Vertica,您需要确认Vertica驱动和您的Vertica服务之间的兼容能力。数据库驱动使用如下版本。
com.vertica
vertica-jdbc
7.1.2
参数说明
参数
描述
是否必选
默认值
datasource
数据源名称,脚本模式支持添加数据源,此配置项填写的内容必须要与添加的数据源名称保持一致。
是
无
jdbcUrl
描述的是到对端数据库的JDBC