![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hive
holomain
足够明亮,做够善良
展开
-
解决beeline -e 无法执行多条sql 问题
beeline -e 执行多行sql 语法原创 2022-07-22 20:53:18 · 3109 阅读 · 1 评论 -
sqoop 并行抽取数据,同时解决数据倾斜
这里写自定义目录标题Sqoop 并行抽取数据根据sqoop源码的设计,我们可以使用--query语句中添加自增ID,作为split-by的参数,与此同时通过设置的自增ID的范围可以设置boundary。。Sqoop 并行抽取数据通常可以指定split-by 对应的zizengID 列,然后使用–num-mappers或者-m指定map的个数,即并发的抽取进程数量。但是有时候会碰到很多的表没有添加自增ID或者,整数型的主键,或者 主键分布不均,反而会拖慢整个job的进程。根据sqoop源码的设计,我们可原创 2020-09-01 22:55:59 · 1785 阅读 · 0 评论 -
Hive2.1.1 下hwi web界面的配置(超详细)
Hive 2.1.1 下web界面的搭建, 超详细, ANT1.9.7, hive-hwi-2.1.1.war原创 2016-12-17 18:04:03 · 4182 阅读 · 3 评论 -
Hive Schema version 2.1.0 does not match metastore(版本不匹配)解决
Caused by: MetaException(message:Hive Schema version 2.1.0 does not match metastore’s schema version 1.2.0 Metastore is not upgraded or corrupt)_2 解决方案: 1.登陆mysql,修改hive metastore版本:进行mysql:mysql...原创 2018-04-10 20:13:14 · 8276 阅读 · 15 评论