sqoop 数据导出，hive -->mysql

最新推荐文章于 2024-10-08 17:39:57 发布

老顽童-小周

最新推荐文章于 2024-10-08 17:39:57 发布

阅读量101

点赞数

文章标签：数据库大数据

本文链接：https://blog.csdn.net/tongjun_zhou/article/details/84901611

版权

命令
导出：
sqoop export --connect jdbc:mysql://localhost:3306/test --username root --password root --table test --export-dir '/user/hive/warehouse/test' --fields-terminated-by '\001' --input-null-string '\\N' --input-null-non-string '\\N' --input-lines-terminated-by '\n' -m 1

导入
mysql --》hdfs;

sqoop import --connect jdbc:mysql://localhost:3306/test--username root --password root--table test--as-textfile --delete-target-dir --fields-terminated-by '\001' --target-dir /user/hive/warehouse/test

hdfs -->hive 数据加载：

LOAD DATA [color=red]LOCAL [/color]INPATH 'dim_csl_rule_config.txt' OVERWRITE into table dim.dim_csl_rule_config;

其中local 是指本地磁盘。

导hdfs 只需
LOAD DATA INPATH 'dim_csl_rule_config.txt' OVERWRITE into table dim.dim_csl_rule_config;

load data inpath '/user/hdfs/user/hive/warehouse/myTable' overwrite into table myTable