SQL实现MYSQL到HIVE建表语句的转换（异构数据源DDL转换）

最新推荐文章于 2024-09-06 19:48:52 发布

陈伦(colby)

最新推荐文章于 2024-09-06 19:48:52 发布

阅读量6.3k

点赞数 10

分类专栏： SQL Mysql

本文链接：https://blog.csdn.net/colby_chenlun/article/details/100131940

版权

本文介绍了如何将MYSQL的建表语句转换为HIVE的建表语句，通过使用特定的转换查询，实现了异构数据源的DDL转换。以维度表dim_ddl_convert为例，展示了数据类型映射的过程，并提供了在Hive中执行转换后语句的方法。

摘要由CSDN通过智能技术生成

准备一张维度表：dim_ddl_convert，建表语句如下：

CREATE TABLE
    dim_ddl_convert
    (
        source VARCHAR(100) NOT NULL,
        data_type1 VARCHAR(100) NOT NULL,
        target VARCHAR(100) NOT NULL,
        data_type2 VARCHAR(100),
        update_time VARCHAR(26),
        PRIMARY KEY (source, data_type1, target)
    )
    ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COMMENT='数据库表结构转换';

导入数据MYSQL数据类型与HIVE数据类型的映射关系，结果如下：

INSERT INTO dim_ddl_convert (source, data_type1, target, data_type2, update_time) VALUES ('mysql', 'bigint', 'hive', 'BIGINT', '2019-07-31 00:00:00');
INSERT INTO dim_ddl_convert (source, data_type1, target, data_type2, update_time) VALUES ('mysql', 'bigint', 'odps', 'BIGINT', '2019-05-06 00:00:00');
INSERT INTO dim_ddl_convert (source, data_type1, target, data_type2, update_time) VALUES ('mysql', 'binary', 'hive', 'BINARY', '2019-07-31 00:00:00');
INSERT INTO dim_ddl_convert (source, data_type1, target, data_type2, update_time) VALUES ('mysql', 'binary', 'odps', 'BINARY', '2019-05-06 00:00:00');
INSERT INTO dim_ddl_convert (source, data_type1, target, data_type2, update_time) VALUES ('mysql', 'char', 'hive', 'STRING', '2019-07-31 00:00:00');
INSERT INTO dim_ddl_convert (source, data_type1, target, data_type2, update_time) VALUES ('mysql', 'char', 'odps', 'STRING', '2019-05-06 00:00:00');
INSERT INTO dim_ddl_convert (source, data_type1, target, data_type2, update