Kudu简单使用

环境版本:CDH 6.3.2 | Impala 3.2.0 | Hive 2.1.1 | Hue 4.2.0 | kudu 1.10.0

# 创建kudu表,需指定主键、分区
CREATE TABLE kudu_table
(
  id BIGINT,
  name STRING,
  PRIMARY KEY(id)
)
PARTITION BY HASH PARTITIONS 16
STORED AS KUDU;

# 创建impala外部表映射kudu表
CREATE EXTERNAL TABLE test.mapping_table
STORED AS KUDU
TBLPROPERTIES (
  'kudu.table_name' = 'test.kudu_table'
);

# 查
SELECT * FROM kudu_table;

# 删表
DROP table kudu_table;

# 增
INSERT INTO kudu_table VALUES (99, "sarah");
INSERT INTO kudu_table VALUES (0, "tom");
INSERT INTO kudu_table VALUES (1, "john");

# 有则更新,没有新增
UPSERT INTO kudu_table VALUES (88, "guo");
UPSERT INTO kudu_table VALUES (99, "guo");

# 改
UPDATE kudu_table SET name="bob" where id = 99;

# 删,支持条件删除
DELETE FROM kudu_table WHERE id > 88;

INVALIDATE METADATA;

需要注意的是,创建的kudu表和impala外部表映射kudu表都无法使用hive查询,hive也无法创建。默认不支持,不知道是否可配。
此外,建kudu表需至少有三个tablet。
在这里插入图片描述在这里插入图片描述
在这里插入图片描述

官方文档:https://kudu.apache.org/docs/kudu_impala_integration.html

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 2
    评论
你可以使用 Apache Flink 的 Table API 和 Kudu Connector 来实时读取 Kudu 数据库中的数据。首先,确保你已经正确安装了 Flink 和 Kudu Connector。 接下来,你需要创建一个 Flink 的执行环境,并引入所需的依赖: ```java import org.apache.flink.table.api.EnvironmentSettings; import org.apache.flink.table.api.TableEnvironment; import org.apache.flink.table.api.bridge.java.StreamTableEnvironment; import org.apache.flink.table.api.Table; import org.apache.flink.table.api.TableResult; public class FlinkKuduExample { public static void main(String[] args) { // 创建执行环境 EnvironmentSettings settings = EnvironmentSettings.newInstance().useBlinkPlanner().inStreamingMode().build(); StreamTableEnvironment tableEnv = StreamTableEnvironment.create(StreamExecutionEnvironment.getExecutionEnvironment(), settings); // 注册 Kudu 表 tableEnv.executeSql("CREATE TABLE kudu_table (" + " id INT," + " name STRING," + " age INT" + ") WITH (" + " 'connector' = 'kudu'," + " 'kudu.masters' = 'kudu.master:7051'," + " 'kudu.table' = 'my_table'" + ")"); // 查询 Kudu 表数据 TableResult result = tableEnv.executeSql("SELECT * FROM kudu_table"); Table table = result.getTable(); // 打印查询结果 tableEnv.toAppendStream(table, Row.class).print(); // 执行任务 try { tableEnv.execute("Flink Kudu Example"); } catch (Exception e) { e.printStackTrace(); } } } ``` 在上述代码中,你需要修改以下参数: - `'kudu.master'`:Kudu 的主节点地址和端口。 - `'kudu.table'`:要读取的 Kudu 表名。 然后,你就可以使用 Flink 的 Table API 来编写你的查询逻辑,并将结果打印出来。 注意,这只是一个简单的示例。在实际使用中,你可能需要根据具体情况调整代码和配置。另外,确保你已经正确配置了 Kudu 的连接信息和表结构。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

光于前裕于后

您的打赏将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值