原文阅读:Dinky教程- 数据源那些你不知道的功能
Dinky数据源使用教程
项目地址:GitHub - DataLinkDC/dinky: Dinky is a real-time data development platform based on Apache Flink, enabling agile data development, deployment and operation.
如果觉得项目不错欢迎前去点下 Star
在我们日常使用Dinky过程中,数据源是必不可少的,它可以帮我们快速创建Flink sql,查询数据,检查元数据等功能,但是对于连接模板
与连接配置
以及其他功能你都了解吗?下面我来讲一下DInky 数据源的玩法全流程,希望对你开发有帮助。
数据源Flink连接配置
在创建数据源的时候,下面有两个大框,其中一个叫 数据源Flink连接配置
,他的功能类似于全局参数,下面我们以Doris数据源为例,介绍一下这个功能的作用。
- 首先,我们建立一个Doris数据源,名字叫
doris-online
- 填写好参数,测试连接成功
- 在Flink连接配置处填写以下内容
sql 复制代码
'connector' = 'doris',
'fenodes' = 'fe地址:8030',
'username' = '用户',
'password' = '密码'
- 点击保存
返回数据开发页面,新建FlinkSql任务,创建Doris虚拟表
如下图所示,我们可以直接使用 ${doris-online}
来代替上面我们填写的内容,在多任务情况下,这种方式可以实现数据源统一管理与全局设置等功能。doris-online
就是我们数据源的名字
当然你也可以使用全局变量实现此功能,这个连接配置是不是显得多余了?
自然不是,这就要提出数据源里面的另一个功能,Flink 连接模板
Flink 连接模板
继续我们上面的Doris数据源编辑
在Flink 连接模板处填写以下内容
sql 复制代码
${doris-dev},
'table.identifier' = '#{schemaName}.#{tableName}'
${doris-dev}
自然就是我们Flink连接配置里面的内容了,下面的先不用管,后面自由妙用。
然后我们返回数据开发,点击左侧数据源,选择我们刚刚建立的Doris,随便选择一张表
、
点击生成SQL
我们会发现,dinky不仅生成了Flink Sql ddl建表语句,还把 #{schemaName}.#{tableName}
替换为了实际的库和表名,我们只需要直接复制即可使用,是不是大大方便了开发呢。
数据查询
还支持简单的数据查询功能