![](https://img-blog.csdnimg.cn/20201014180756913.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hive
奔跑的蜗牛AZ
这个作者很懒,什么都没留下…
展开
-
hive 自定义函数 UDF 简单案例
hive 自定义函数 UDF 案例hive自定义函数分为三类:UDF(User-Defined-Function)普通函数, 一进一出UDAF(User-Defined Aggregation Function)聚合函数,多进一出UDTF(User-Defined Table-Generating Functions)表生成函数, 一进多出UDF简单案例依赖<?xml version="1.0" encoding="UTF-8"?><project xmlns="htt原创 2020-12-14 21:23:10 · 594 阅读 · 0 评论 -
hive相关知识之面试题
hadoop 几个进程DataNodeTaskTrackerNameNodeJobTrackerSencondaryNameNodehadoop的核心配置文件core-site.xmlhdfs-site.xml(HA)mapred-site.xmlyarn-site.xmlhive 有哪些方式保存元数据 各有什么特点1)、内嵌模式:将元数据保存在本地内嵌的der...原创 2020-04-23 22:36:34 · 115 阅读 · 0 评论 -
hive相关知识之常用操作语句
开启动态分区功能,允许所有的分区字段都可以使用动态分区set hive.exec.dynamic.partition=true; set hive.exec.dynamic.partition.mode=nonstrict; 查看结果show create table;show partitions table;describe table;Hive几种使...原创 2020-04-23 22:31:46 · 120 阅读 · 0 评论 -
hive相关知识之优化
limit限制调整–因为使用limit语句时候,是先执行整个查询语句,然后再返回部分结果的set hive.limit.optimize.enable=true;set hive.limit.row.max.size=10000;set hive.limit.optimize.limit.file=10;2.JOIN优化。。。本地模式–hive尝试使用本地模式执行查询,要不然...原创 2020-04-23 22:20:44 · 240 阅读 · 0 评论 -
HIve相关知识
Hive数据仓库和数据库的区别传统数据仓库面临的挑战:1、面对实时海量数据,无法满足快速增长的海量数据存储要求2、无法有效处理不同类型数据3、计算和处理能力不足Hive的数据类型...原创 2019-07-18 21:53:34 · 108 阅读 · 0 评论