iceberg表flink访问有两种方式

iceberg表flink访问有两种方式
1. connector 直接访问

CREATE TABLE ods_iceberg_bi_o2o_stream_v1_0904 (自己定义,当前catalog database 下面不重复即可)(
    id   BIGINT,
    data STRING
) WITH (
    'connector'='iceberg',        -- 固定值 iceberg
    'catalog-name'='hive',        -- 当前的catalog 名称 ,用户自定义即可
    'catalog-type'='hive',        -- 指定hive类型
    'catalog-database'='dl_test',  -- 真实的库名
    'catalog-table'='ods_iceberg_bi_o2o_stream_v1_0904',  -- 真实的表名
    'uri'='thrift://xxxxxx:9083', -- 必须要指定 uri
    'warehouse'='hdfs://nnn/user/hive/warehouse/'  -- 不指定也行 
);
直接select * from 表名即可

2. ddl 方式

CREATE CATALOG iceberg WITH (
 'type' = 'iceberg',
 'catalog-type'='hive',
 'uri'='thrift://xxxxxx:9083',
 'clients'='5',
 'property-version'='1',
 'hive-conf-dir' = '/opt/flink-1.14.0/conf'
);

直接select * from iceberg.database.db  即可

感觉都行,用户根据自己喜爱使用,通用型的话,好像都使用 1的方式比较直接一些,是映射的外表,删除也不影响原表
任务隔离性强,缺点就是每个表都得把 上在的属性都指定一下,方式2 定义一次即可 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值