hive收集

最新推荐文章于 2023-06-29 17:09:45 发布
最新推荐文章于 2023-06-29 17:09:45 发布
阅读量1.3k 收藏 2
点赞数
分类专栏： 大数据 hbase 大数据 hadoop 文章标签： hive
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zlfprogram/article/details/78018310
版权


hive

　　Hive体系架构

　　应用

　　　　Hadoop和Hive的数据处理流程

　　管理

　　　　hive部署手册

　　　　hive元数据中utf8的修改

 　　　  hive并发调用的运行方式-个人经验篇

 　　　　

　　　　hive Cli常用操作(翻译自Hive wiki)

　　　　hive数据类型(翻译自Hive Wiki)

 

　　　　hive 创建/删除/截断 表(翻译自Hive wiki)

　　　　hive数据操作(翻译自Hive wiki+实例讲解)

　　　　hive原生和复合类型的数据加载和使用

 　　　  hive修改 表/分区语句

 

　　　　hive select操作(翻译自Hive wiki)

　　　　hive GroupBy操作(翻译自Hive wiki)

　　  　 hive 中 Order by, Sort by ,Dristribute by,Cluster By 的作用和用法

 　　　　Hive Join(翻译自Hive wiki)

　　　　 hive lateral view语句(翻译自Hive wiki)

 　　　　Hive Union(翻译自Hive wiki)

 　　　　Hive子查询(翻译自Hive wiki)

　　　　 hive实例讲解实现in和not in子句

 　　　　Hive Explain(翻译自Hive wiki)

 　　　　Hive虚拟列(翻译自Hive wiki)

 　　　　hive 锁定(翻译自Hive wiki)

 

　　　   hive函数(Hive wiki)

　　　　hive udf开发流程(Hive wiki)

　　　　hive udaf开发入门和运行过程详解

　　　　hive中UDTF编写和使用

　　　　hive属性(Hive wiki)

 

　　　　hive中分组取前N个值的实现

 

　　　　hive sql遇到的问题

　　优化

　　　　hive大数据倾斜总结

　　　　hive join详解

 　　　　

　　　　hive文件存储格式

 

　　　　hive怎样决定reducer个数

　　　　hive的hive.exec.parallel参数说明

　　　　hive local hadoop特性　

L-Zhang
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Hive收集函数和转换函数
实践求真知
12-05 632
一 收集函数 size select size(map(1,'Tom',2,'Mary')); 二 转换函数 cast select cast(1 as bigint); select cast(1 as float); select cast('2014-05-05',date): 三 实战
Hive表统计信息采集及应用
邢为栋
03-27 1650
Hive提供了分析表和分区的功能，可以将分析后的统计信息存入元数据中，该功能可以自动执行分析表或手动执行分析表。自动执行分析主要针对新创建的表，可以通过配置启用，配置说明详见。Hive默认启用表级别的统计信息收集，在DML（除了LOAD DATA语句）操作期间，自动收集并更新统计信息。默认不启用列级别的统计信息收集。手动执行分析StatsDev。
走近大数据之Hive进阶（三、Hive的内置函数）
goldmei一枝梅的专栏
04-22 350
目录 一、Hive数学函数 二、Hive字符函数 三、Hive收集函数和转换函数 四、Hive日期函数 五、Hive条件函数 六、Hive聚合函数和表生成函数 一、Hive数学函数 round 四舍五入 前面是小数，后面是取整位数 ceil 向上取整 floor 向下取整 二、Hive字符函数 字符串转换成小写:lower 字符串转换成大写:upper ...
Hive中高频常用的函数和语法梳理及业务场景示例
wt334502157的博客
06-29 1592
函数在Hive中被广泛使用，可以用于数据清洗、转换、计算和分析等各种业务场景。根据具体的需求，选择合适的函数可以提高查询和处理数据的效率，并实现所需的功能
Hive: 函数大全
mapplei的博客
07-28 736
一、关系运算: -- 1. 等值比较:= 语法:A=B 操作类型:所有基本类型 描述: 如果表达式 A 与表达式 B 相等，则为 TRUE;否则为 FALSE 举例: hive> select 1 from lxw_dual where 1=1; -- 2. 不等值比较:<> 语法: A <> B 操作类型: 所有基本类型 描述: 如果表达式 A 为 NULL，或者表达式 B 为 NULL，返回 NULL;如果表达式 A
Hive收集的电子文档
12-25
这个“Hive收集的电子文档”很可能是关于Hive的教程、手册或者技术文档，包含了一系列关于如何使用Hive进行大数据分析的知识。 Hive的核心概念包括： 1. **元数据（Metadata）**：元数据是关于数据的数据，比如...
hive函数1
08-04
除了上述运算符和函数，Hive 还提供了丰富的其他功能，如数学函数（如 `ABS`, `SQRT`, `POW` 等）用于数学计算，收集函数（如 `COUNT`, `SUM`, `AVG` 等）用于聚合数据，以及类型转换函数（如 `CAST`）用于将数据从...
hive 20160130
01-07
- 日志分析：收集、存储和分析大量服务器日志。 - 用户行为分析：研究用户在网站上的行为模式。 - 数据挖掘：为决策支持系统提供数据基础。 - 实时数据分析：结合Storm或Spark实现近实时处理。 在提供的资料中...
kafaka+hive.rar
07-24
Kafka可以作为数据源，收集实时产生的数据流，然后将这些数据推送到Hive中进行离线分析。 标签“hive”暗示了我们重点讨论的是Hive的相关知识点。在Hive中，用户可以通过创建表来组织数据，并使用HQL进行查询。表...
hive on tez 常见报错问题收集
01-26
1）Failing because I am unlikely to write too. 2）Caused by: java.lang.OutOfMemoryError: Java heap space ...5）hive on tez 最终insert的表如果使用到union all 时会导致直接查询结果表数据为空的
hiveSQL常见函数及用法（持续收集）
xukaiqiang123的博客
07-13 4735
注意：聚合函数常与 SELECT 语句的 GROUP BY 子句一块儿使用。换句话说使用聚合函数时，一个列字段要不在group by里，要没必要须在聚合函数里面，不能单独出现，不然报错。 不支持等值连接，一般使用left join、right join 或者inner join替代。 2、分号字符 分号是sql语句的结束符号，在hive中也是，但是hive对分号的识别没有那么智能，有时需要进行转义 “；” --> “\073”sql中null代表空值，但是在Hive中，String类型的字段若是空（empt
Hive的内置函数
Mark_Frank的博客
08-26 3592
参考文章：https://www.cnblogs.com/qingyunzong/p/8744593.html 一、数学函数 Return Type Name（Sinature) Description DOUBLE round(DOUBLE a) Returns the roundedBIGINTvalue ofa. 返回对a四舍五入的BIGINT值 DOUBLE round(DOUBLE a, INT d) Ret...
Hive处理案例——Zebra业务数据清洗
Winyar的博客
07-21 1025
Zebra业务回顾 zebra业务回顾 zebra项目最开始阶段会对日志文件进行分析统计，针对apptype,userip等20个字段做了统计，然后把最后的结果落地到数据库里。这张表相当于总表（f_http_app_host） 在企业里做到这步并没有结束，因为后续还要做数据分析，可能会针对此表进行多个维度的查询和统计，比如： 1.应用欢迎度 2.各网站表现 3.小区Http上网能力 4.小区上网...
Hive 函数大全（吐血整理）
GodSuzzZ的博客
06-17 2万+
Hive 函数大全（吐血整理） 前言   Hive 内部提供了很多函数给开发者使用，包括数学函数，类型转换函数，条件函数，字符函数，聚合函数，表生成函数等等，这些函数都统称为内置函数。 在 hive 中可通过以下命令查看函数信息： --显示所有的可用函数，包括运算符、内置函数、自定义函数 show f
hive函数之数学函数
weixin_34392435的博客
08-16 627
hive函数之数学函数 round(double d)--返回double型d的近似值（四舍五入），返回bigint型； round(double d,int n)--返回保留double型d的n位小数double型近似值（四舍五入）； floor(double d)--返回<=d的最大bigint值； ceil(double d)--返回>=d的最小bigint 值； ...
sqoop+mysql+hive收集数据&例子
xieedeni的博客
09-30 4499
业务场景 业务场景中存在需要将业务数据存放到hive中做数据BI统计等情形。 解决方案 我们可以使用sqoop工具，将业务数据库mysql或者oracle中的数据落地到hive表中，以方便后续的大数据统计分析。 具体步骤 说明：mysql数据库或者oracle数据的安装大人们可以自己搜索资料了； hive和hadoop的安装： Windows10 安装Hadoop3.3.0_xieedeni的博客-CSDN博客 Windows10安装Hive3.1.2_xieedeni的博客-CSDN博客
Hive的Collect函数
热门推荐
夫唯不争，故天下莫能与之争。
08-24 2万+
有以下表 id name 1001 A 1001 B 1001 C 实现以下功能 id name 1001 A,B,C 即按照id 进行group by，将每个id的name组成一个list放到name字段中。select id,collect_list(name) from table group by id若name中有重复的值，可以用collect_
hive内置函数
小学生
09-22 538
1.内置运算符 1.1关系运算符 运算符 类型 说明 A = B 所有原始类型 如果A与B相等,返回TRUE,否则返回FALSE A == B 无 失败，因为无效的语法。 SQL使用”=”，不使用”==”。 A B 所有原始类型 如果A不等于B返回TRUE,否则返回FALSE。如果A或B值为”NULL”，结果返回”NULL”。 A < B 所有原始类型 如果A小于B返回T...
Hadoop维护实战-设置hdfs副本数 dfs.replication
秀才的专栏
07-01 1万+
Hadoop维护实战 设置hdfs副本数 dfs.replication有个临时应用，使用临时调配的机器，机器磁盘差别数十倍。在使用hadoop存储数据时导致小磁盘机器使用率达80%多，而大磁盘机器使用不过才10%多一点。明显的hadoop集群各datanode空间使用率很不均衡，需要重新balance。于是想到了hdfs的均衡器balancer。sbin/start-balancer.sh -t
基于hive旅游数据的分析与应用 PPT.pptx
最新发布
12-21
旅游数据管理，对收集到的旅游数据进行清洗、整合和分析；地名管理，维护地理信息数据；以及系统管理，负责系统的日常维护和更新。 在开发过程中，系统经过了详细的测试，包括功能测试和性能测试，确保系统的稳定...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值