hive简介

最新推荐文章于 2024-09-21 20:44:05 发布
最新推荐文章于 2024-09-21 20:44:05 发布
阅读量340 收藏
点赞数
分类专栏： hive 文章标签： hive hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/z971829916/article/details/49717143
版权

1.hive简介

Hive是一个基于Hadoop文件系统上的数据仓库架构。它为数据仓库的管理提供了许多功能：数据ETL(抽取、转换和加载)工具、数据存储管理和大型数据集的查询与分析能力。同时Hive还定义了类SQL的语言——Hive QL，Hive QL允许用户进行和SQL相似的操作。HiveQL还允许开发人员方便地使用mapper和reducer操作，这样对MapReduce框架是一个强有力的支持。
为它一生奉献
关注
专栏目录
hive函数简介
09-09
【Hive函数简介】 Hive 是一个基于 Hadoop 的数据仓库工具，它的主要目标是让非程序员能够方便地对大规模数据进行分析。Hive 提供了一个类似 SQL 的查询语言，称为 HiveQL，使得用户无需编写 MapReduce 程序就能...
Hive简介及核心概念.md
08-07
Hive简介及核心概念，入门篇
大数据学习：Hive简介.pdf
12-07
在大数据领域，Hive是一个重要的工具，它被设计用来处理和管理大规模的数据。Hive是基于Hadoop的数据仓库工具，允许用户使用SQL（结构化查询语言）来查询、管理和存储数据。它将SQL查询转换为MapReduce任务，使得非...
Spark任务读取hive表数据导入es
小小码农的博客
09-19 293
sql读取的字段需要与es字段名一一对应。将hive表数据导入es，超级简单。2. 创建sparkconf。
Hive企业级调优[5]—— HQL语法优化之数据倾斜
最新发布
qq_45115959的博客
09-21 621
数据倾斜问题通常指的是参与计算的数据分布不均，即某个key或某些key的数据量远超其他key，导致在shuffle阶段，大量相同key的数据被发送到同一个Reduce节点，从而使该Reduce节点所需的时间远超其他Reduce节点，成为整个任务的瓶颈。Hive中的数据倾斜常见于分组聚合和join操作的场景中。
Hive parquet表通过csv文件导入数据
mizuhokaga的博客
09-18 274
已建好了 hive parquet 格式的表, 需要从服务器的csv导入数据至该hive表。提前上传csv至服务器 /path/temp.csv。创建 textfile 格式的中转表 ,源表名。,这里中转表加上了csv后缀。
SIP Servlets学习
pumpkin84514的博客
09-18 693
是一种扩展 Java Servlets 的 API，专门用于处理 SIP（Session Initiation Protocol）消息，用于实现语音和视频通信应用。SIP Servlets 在支持 SIP 的 Java Servlet 容器中运行（如 JBoss AS / WildFly）。这些资源将帮助你理解 SIP Servlets 的工作原理、如何配置和部署它们，并提供实际的示例和教程。以下是一个简单的 SIP Servlet 示例，演示如何处理 SIP INVITE 请求并发送响应。
DataGrip远程连接Hive
ABU009的博客
09-21 292
#学会用datagrip连接hive
presto操作hive数据的时候如何覆盖写数据
别人笑我太疯癫，我笑他人看不穿。
09-18 238
要注意的是，有的人会先delete旧数据，但是这种操作会造成分区结构被删掉但是同时底层文件仍然存在的问题，Presto认为该分区不存在，需要新建分区，但底层文件其实还存在，这样会造成 Unable to rename …同时要注意你使用的发行版是那个，博主之前用过李老板家的BOS，那个服务的第三方路径是dgs，因此这个配置被封装成了。，但是这个语句在presto中不支持，在presto中你需要在sql前面写上如下的参数。语句就行，已存在的分区中的数据会被覆盖，若分区不存在会新建。带上这个参数之后，正常写。
二百六十五、Hive——目前Hive数仓各层表样例
tiantang2renjian的博客
09-19 1036
Hive——目前Hive数仓各层表样例
技术选型对SQL与NoSQL以及Mysql,Hbase,Hive使用特性差别
Climbman的博客
09-16 1073
数据结构明确且需要严格一致性时。处理大规模非结构化数据时。快速开发和简单应用场景。
Hive企业级调优[2]—— 测试用表
qq_45115959的博客
09-19 471
文件上传到 hadoop12 节点的。文件上传到 hadoop12 节点的。文件上传到 hadoop12 节点的。文件上传到 hadoop12 节点的。注：需要下载源数据的，评论区私俺。目录，并执行以下导入语句。目录，并执行以下导入语句。目录，并执行以下导入语句。目录，并执行以下导入语句。
Hadoop的安装和使用
₍˄·͈༝·͈˄*₎◞ ̑̑的博客
09-21 792
Hadoop分布式文件系统（Hadoop Distributed File System，HDFS）是Hadoop项目的两大核心之一，是针对谷歌文件系统（Google File System，GFS）的开源实现。兼容廉价的硬件设备。流数据读写。大数据集。简单的文件模型。强大的跨平台兼容性。
Hadoop
Casual_Lei的博客
09-11 1315
Hadoop 是处理大规模数据的强大工具，它通过 HDFS 提供分布式存储，通过 MapReduce 实现分布式计算，通过 YARN 管理资源，构成了一个高度可扩展的分布式系统。尽管 Hadoop 由于其批处理特点不适用于所有场景，但它在大数据领域依然具有不可替代的重要地位，尤其是在数据湖和批处理任务中。
Hadoop分布式集群配置
Climbman的博客
09-18 704
配置Hadoop分布式集群涉及多个步骤，包括环境准备、配置文件修改、格式化文件系统、启动集群等。以下是一个简化的配置指南，适用于Hadoop 2.x或3.x版本的集群配置。请注意，实际操作中可能需要根据具体版本和需求进行调整。
【赵渝强老师】基于ZooKeeper实现Hadoop HA
赵渝强老师CSDN博客主页
09-18 999
图14.9一共使用了4个节点来部署HDFS HA，它们分别是：bigdata112、bigdata113、bigdata114和bigdata115。（12）将bigdata112上$HADOOP_HOME/tmp拷贝到bigdata113的对应目录下。（9）在bigdata112、bigdata113和bigdata114上启动Zookeeper集群。（10）在bigdata112和bigdata113上启动JournalNode。（6）修改bigdata112节点上的yarn-site.xml文件。
龙蜥8.9系统hadoop3.3.6上spark3.5.2安装(伪分布)
lwprain的专栏
09-15 424
1、去清华的镜像源下载相关文件 https://mirrors.tuna.tsinghua.edu.cn/apache/spark/spark-3.5.2/下面是完整的java、hadoop、scala、spark的配置环境。5、进到/app/spark-3/conf中，复制一个文件出来。这个版本的spark用的是scala-2.12.18。继续接着上篇的环境安装。6、查看spark版本。
JSP学生学籍管理系统设计与实现(源代码+论文+开题报告+外文翻译+答辩PPT).zip
09-21
1、资源项目源码均已通过严格测试验证，保证能够正常运行； 2、项目问题、技术讨论，可以给博主私信或留言，博主看到后会第一时间与您进行沟通； 3、本项目比较适合计算机领域相关的毕业设计课题、课程作业等使用，尤其对于人工智能、计算机科学与技术等相关专业，更为适合； 4、下载使用后，可先查看README.md或论文文件（如有），本项目仅用作交流学习参考，请切勿用于商业用途。 5、资源来自互联网采集，如有侵权，私聊博主删除。 6、可私信博主看论文后选择购买源代码。 1、资源项目源码均已通过严格测试验证，保证能够正常运行； 2、项目问题、技术讨论，可以给博主私信或留言，博主看到后会第一时间与您进行沟通； 3、本项目比较适合计算机领域相关的毕业设计课题、课程作业等使用，尤其对于人工智能、计算机科学与技术等相关专业，更为适合； 4、下载使用后，可先查看README.md或论文文件（如有），本项目仅用作交流学习参考，请切勿用于商业用途。 5、资源来自互联网采集，如有侵权，私聊博主删除。 6、可私信博主看论文后选择购买源代码。 1、资源项目源码均已通过严格测试验证，保证能够正常运行； 2、项目问题、技术讨论，可以给博主私信或留言，博主看到后会第一时间与您进行沟通； 3、本项目比较适合计算机领域相关的毕业设计课题、课程作业等使用，尤其对于人工智能、计算机科学与技术等相关专业，更为适合； 4、下载使用后，可先查看README.md或论文文件（如有），本项目仅用作交流学习参考，请切勿用于商业用途。 5、资源来自互联网采集，如有侵权，私聊博主删除。 6、可私信博主看论文后选择购买源代码。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值