数仓工具—Hive语法之Merge 语句(22)

不二人生

已于 2022-08-22 09:07:05 修改

阅读量4.1w

点赞数

分类专栏： Hive 实战文章标签： hive 数据库 hadoop

于 2022-08-20 10:59:44 首次发布

本文链接：https://blog.csdn.net/king14bhhb/article/details/126437299

版权

Hive 实战专栏收录该内容

119 篇文章 72 订阅 ¥59.90 ¥99.00

订阅专栏

超级会员免费看

本文介绍了Hive中的Merge语句，主要用于增量数据导入和更新场景，特别是更新缓慢变更维度。Merge语句允许同时更新已存在记录和插入新记录，类似于UPDATE和INSERT的结合。文章提供了Merge语句的使用案例，以及在不支持Merge语句的Hive版本下的替代方案，强调了实践对于掌握这种语法的重要性。

摘要由CSDN通过智能技术生成

Merge 语句

Merge 语句经常用在增量数据导入和数据更新的场景，在Merge语句的加持下，我们可以很方便的同时写出写出UPDATE和INSERT语句，也就是我们可以同时更新已经存在的记录和插入新的记录。

MERGE语句经常用在更新缓慢变更维度，需要注意的是有时候update insert 也被称为 UPSERT。

Merge 案例

MERGE语句我们需要指定一个匹配条件，然后可以执行两个操作

当source表的记录和目标表记录匹配的时候(一般情况下更新)
当source表的记录和目标表记录不匹配的时候(一般情况下插入)

当然我们也可以执行删除操作，下面是一个MERGE 的例子，需要注意的是Hive 从2.2 版本开始才支持MERGE

MERGE INTO merge_demo1 A 
using merge_demo2 B 
ON ( A.id = b.id ) 
WHEN matched THEN 
  UPDATE SET A.lastname = B.lastname 
WHEN NOT matched THEN 
  INSERT (id, 
          firstname, 
          lastname) 
  VALUES (B.id, 
          B.firstname, 
          B.lastname);