hive中修改或者增加字段2022-04-20

呼伦贝尔-钢蛋儿

已于 2022-04-20 13:48:09 修改

阅读量2.9k

点赞数

文章标签： sqlserver linux database sql

于 2022-04-20 13:46:59 首次发布

本文链接：https://blog.csdn.net/qq_38220334/article/details/124295652

版权

在实际的数据同步过程中，遇到从SQLServer到Hive的数据迁移错误，原因是字段名不匹配。解决方法是修改Hive表的字段名以匹配源数据库。涉及的步骤包括将外部表转为内部表，使用ALTER TABLE命令更改字段名和类型，并添加字段注释，最后再将表恢复为外部表。这个过程对于确保数据迁移的成功至关重要。

摘要由CSDN通过智能技术生成

业务背景：实际开发的时候，我们从sqlserver向hive中同步数据，发现报错了，原因是sqlserver中的字段和hive中的字段名有一个没有对应上，然后修改了字段名，可以正常导入了。

修改表字段的数据类型或者修改表字段名字

#如果表是外部表，需要先修改为内部表
alter table 数据库名.表名 set tblproperties('EXTERNAL' = 'FALSE');

ALTER TABLE 数据库名.表名 CHANGE COLUMN 字段名 新的字段名(如果不变就保持原字段) 字段类型(若不变就采用原来的字段) COMMENT '新的字段备注';

alter table 数据库名.表名set tblproperties('EXTERNAL' = 'TRUE');

新增表字段

#如果是外部表，需要先修改为内部表
alter table 数据库名.表名 set tblproperties('EXTERNAL' = 'FALSE');
-- 新增列
alter table 数据库名.表名add columns(log_id string COMMENT '数据源请求唯一键');

alter table 数据库名.表名set tblproperties('EXTERNAL' = 'TRUE');