![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
sqoop
文章平均质量分 58
AllenGd
人生之奋斗,其苦无穷,其乐无穷。
展开
-
Hive常见问题 unable to create manager for [/var/log/hive/operation_logs/xxxxx
关联查询执行sqoop命令,hive sql的时候,先报一堆错,然后执行job,报错截图如下:异常原因:mapreduce将数据量小的表识别成了大表,数据量大的识别成小表,将数据量大的表加入到内存,导致程序异常,但并不影响执行结果原创 2022-12-06 17:20:56 · 754 阅读 · 0 评论 -
sqoop的使用
sqoop的使用----sqoop是一个用来在hadoop体系和关系型数据库之间进行数据互导的工具----实质就是将导入导出命令转换成mapreduce程序来实现sqoop安装:安装在一台节点上就可以了。原创 2022-07-20 16:40:17 · 476 阅读 · 0 评论 -
sqoop安装与验证
解压将sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz拷贝到linux下,然后解压tar –zxvf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz然后进入新生成的目录cd sqoop-1.4.6.bin__hadoop-2.0.4-alphacd /confcp sqoop-env-template.sh sqoop-env.sh修改sqoop-env.sh(下面的目录换成你自己的安装目录) #原创 2020-05-15 17:46:16 · 1806 阅读 · 0 评论