首先语句上很简单,
sqoop export \
--connect jdbc:mysql://192.0.0.1:13308/test?characterEncoding=UTF-8 \
--username cxk \
--password jinitaimei \
--table test_table \
--columns a,b,c,d,e \
--hcatalog-database hive_database01 \
--hcatalog-table hive_test_table \
--update-key "a,b,c" \
--update-mode allowinsert
allowinsert 既可以根据updatekey更新,也可以将新值插入
updateonly 只更新不插入新值
需要注意的是,mysql上,作为updatekey的字段必须设置***联合唯一键***或者联合主键,反正就是要有 联合+唯一 的特性。
UNIQUE KEY `report_cash_unique` (`a`,`b`,`c`),