![](https://img-blog.csdnimg.cn/20210815225430660.jpeg?x-oss-process=image/resize,m_fixed,h_224,w_224)
大数据
文章平均质量分 58
大数据
「已注销」
这个作者很懒,什么都没留下…
展开
-
sqoop
sqoop1 sqoop设置--update-mode allowinsert,但是仍然插入新的记录,没有更新2 1 sqoop设置–update-mode allowinsert,但是仍然插入新的记录,没有更新 RCA: 当sqoop,update的时候是需要知道update谁的,如果你的表主键会变或者没有主键,都将使update失败。 solution: 设置主键 2 ...原创 2021-08-15 22:43:18 · 99 阅读 · 0 评论 -
problems_hive
problems_hive1 hive执行sql报错2 创建hive自定义函数报错3 beeline连接hive报错4 1 hive执行sql报错 desc:执行sql语句,join两个子查询 errorlog: FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask Caused by: java.lang.IllegalStateException: Invalid input pa原创 2021-08-15 22:41:55 · 94 阅读 · 0 评论 -
skills_hive
skills_hive1 hive常用配置2 hive交互方式,beeline使用方式3 pv,uv,vv,ip概念3.1 网站浏览量(PV)3.2 独立访客(UV)3.3 独立IP3.4 访问次数(VV)4 explain查看hive sql的执行计划5 1 hive常用配置 <!-- 是否以本地模式启动,默认false --> <!-- 作用:hive查询时使用本地查询,不走集群,加快少量数据的查询速度 --> <!-- 临时开启 set hive.exec.mode.lo原创 2021-08-15 22:32:07 · 120 阅读 · 0 评论