Hive
Hive常见开发问题和学习总结。
椒南境
特战荣耀中有一句台词:“一年级的小豆包儿,一打一蹦高”。出走半生,归来仍是小豆包儿,希望馅料越来越足吧。
展开
-
【Hive自定义UDF函数】
(1)导入依赖<dependency> <groupId>org.apache.hive</groupId> <artifactId>hive-exec</artifactId> <version>2.3.3</version></dependency>(2)自定义一个java类,继承UDF类,重写evaluate方法package com.hive;import org.apache.h原创 2022-05-06 10:52:57 · 150 阅读 · 0 评论 -
Hive常用的优化方式
Hive常用的优化方式fetch抓取hive-default.xml.templatehive.fetch.task.conversion默认为none,查询语句都会使用MR,将none改为more,全局查找、字段查找、limit查询语句将不走MR,效率显著提升。local本地模式通过本地模式在单台机器上处理所有的任务,对于对于小数据集,执行时间明显缩短,多用于测试,不放在Yarn去运...原创 2020-04-30 09:47:24 · 211 阅读 · 0 评论