sqoop import \
--connect "jdbc:postgresql://10.101.70.169:5432/db_name" \
--username "postgres" \
--password "123456" \
--table "test_user"\
--target-dir "/user/hive/warehouse/test.db/test_user" \
--fields-terminated-by '\t' \
--lines-terminated-by '\n' \
--hive-drop-import-delims \
--incremental lastmodified \
--merge-key id \
--check-column update_time \
--last-value "2019-03-25" \
--m 1 \
-- --schema "schema_name" \
--null-string '\\N' \
--null-non-string '\\N'
-- --schema
一定要放在后面,否则可能导致无运行日志
或无法导入数据到指定目录且无法重新执行(报目录已存在)
- PostgreSQL 须设置
SET standard_conforming_strings = on;
,否则--null-string
和--null-non-string
不起作用; --null-string
和--null-non-string
放在-- --schema
后面,否则执行时报Can't parse input data: '\N'