hadoop相关
路过倾蜓
这个作者很懒,什么都没留下…
展开
-
idea(pycharm)连接hive问题汇总
idea 连接hive各种报错解决。原创 2022-07-22 15:29:54 · 1698 阅读 · 3 评论 -
spark写入hudi表报错:NoSuchMethodError: org.apache.http.client.utils.URLEncodedUtils.encPath
NoSuchMethodError: org.apache.http.client.utils.URLEncodedUtils.encPath原创 2022-06-29 09:02:04 · 641 阅读 · 0 评论 -
HDFS node01:50070端口无法访问解决
50070端口无法访问问题原创 2022-06-22 22:32:27 · 3000 阅读 · 0 评论 -
【hadoop学习笔记】【3】Hive调优
文章目录1.fetch抓取2. 本地查询3.mapjoin4.group by5.COUNT(DISTINCT)6.尽量避免笛卡尔积7.动态分区8.并行执行1.fetch抓取某些情况查询不必使用mapreduce# 执行mrset hive.fectch.task.conversion=none;# 不执行mrset hive.fectch.task.conversion=more;2. 本地查询小数据集不惜要启动集群,在单台机器上处理任务:set hive.exex.mode.loca原创 2022-03-26 23:58:07 · 319 阅读 · 0 评论 -
【hadoop学习笔记】【1】hive内部、外部表操作
hive内部表、外部表操作、分区表创建、查询操作原创 2022-03-20 21:13:32 · 799 阅读 · 0 评论