![](https://img-blog.csdnimg.cn/20190927151101105.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
Sqoop
Sqoop(发音:skup)是一款开源的工具,主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql...)间进行数据的传递,可以将一个关系型数据库(例如 : MySQL ,Oracle ,Postgres等)中的数据导进到Hadoop的HDFS中,也可以将HDFS的数据
程序员大厨
不会做饭的程序员不是个好老公!
展开
-
使用Sqoop将Mysql导入hive报错:ERROR IN CONTACTING RM(memory < 0, or requested memory > max configured)
报错信息:2020-08-24 10:37:54,524 ERROR [RMCommunicator Allocator] org.apache.hadoop.mapreduce.v2.app.rm.RMCommunicator: ERROR IN CONTACTING RM. org.apache.hadoop.yarn.exceptions.InvalidResourceRequestException: Invalid resource request, requested memory <原创 2020-08-26 13:52:58 · 640 阅读 · 0 评论 -
使用Sqoop将MySql to Hive问题解决记录
使用Sqoop将MySql to Hive问题解决记录1、Sqoop连接hive元问题hive配置文件hive-site.xml 将hive.metastore.uris,value值设置为空。 hive.metastore.uris 2、Sqoop导入到hive问题描述:OOM错误和Container killed on request. Exit code is 143Container exited with a non-zero exit code 143调整hadoop原创 2020-07-15 17:20:36 · 455 阅读 · 0 评论