iceberg-flink 十一:在dlink代码中建表增加catalog地址。

一:catalog

是存储元数据的地方。

二:表中增加catalog地址’

当我们映射iceberg表的时候,增加了地址,就会成功映射到表

CREATE CATALOG dk_empower WITH(
    'type'='iceberg',
    'catalog-type'='hadoop',
    'warehouse'='hdfs://cluster/iceberg/warehouse/iceberg_hadoop/dk_empower',
    'property-version'='1'
);


create table  dwd_dk_event_log (
      p_dt	        string,
      process_name	string,
      stage	        int,
      stage_name	string,
      event_id	    string,
      event_name	string,
      flag          int,
      state         int,
      `ts` timestamp_ltz,
      `ts1` as CAST(ts AS TIMESTAMP_LTZ(3)),
      WATERMARK FOR ts1 AS ts1 - INTERVAL '5' SECOND   -- 在t_s上定义5 秒延迟的 watermark
) with (
      'connector'='iceberg',
      'catalog-name'='dk_empower',
      'catalog-database'='ods',
      'catalog-table'='dwd_dk_event_log',
      'streaming'='true',
      'monitor-interval'='2s',
      'catalog-type'='hadoop',
      'warehouse'='hdfs://cluster/iceberg/warehouse/iceberg_hadoop/dk_empower'
      --'start-snapshot-id'=''
      );

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值