Hive面试题

已于 2022-12-04 20:51:26 修改
阅读量710 收藏
点赞数 1
分类专栏： 面试 文章标签： hive hadoop 数据仓库 经验分享
于 2022-10-11 11:43:43 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42322454/article/details/127260463
版权

Hive面试题

Hive

1. Hive核心

Hive（离线数仓）核心是把SQL语法转换为MapReduce


2. Hive和Hadoop关系

Hive利用Hadoop的HDFS存储实际数据和利用MapReduce分析数据


3. Hive有几种表类型，各有什么特点？

  • 内部表：删除内部表时会将Metastore中的元数据和HDFS中的数据一起删除
    • Hive创建表时默认选择内部表
    • 当需要通过Hive完全管理控制表的整个生命周期时，使用内部表
  • 外部表：删除外部表，只会删除元数据，不会删除HDFS中的数据
    • 适合多人同时操作数据库时建立的表
  • 分区表：通过分区把不同类型的数据放在不同的目录中
    • 意义在于优化查询，减少全表扫描
  • 分桶表：根据哈希值取余计算，将余数相同的数据保存在同一个文件夹下。
    • 意义在于优化查询，减少全表扫描
    • 比分区表划分的更加精细，但是数据平均，适合数据抽样
    • JOIN时可以提高MR程序效率，减少笛卡尔积数量

Hive的优化手段

  • 分区、分桶
  • 开启Map聚合
Kazi_1024
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Apache Hive(二) 基本使用
wuhulala的休息室
05-10 956
命令交互 交互式命令 hive bin/hive -e 语句 hive -e "select * from student" -f sql 文件 hive -f xx.sql beeline 启动 hiveserver2 bin/hiveserver2 nohup bin/hiveserver2 > > /dev/null 2>&1 & 不考虑鉴权 bin/beeline -u jdbc:hive2:// bin/beeline -u jdbc:hive2:/
hive面试题
12-04
### Hive基础知识及面试要点 #### 一、Hive概述与架构 **1.1 Hive是什么？** Hive是一个构建在Hadoop之上的数据仓库架构，它提供了一系列工具用于数据提取、转换、加载（ETL）。Hive使得用户能够对存储在Hadoop中...
4 Apache Hive入门
THE ORDER
02-12 432
1 Hive简介 2 为什么使用Hive 3 Hive和Hadoop关系 4 映射信息记录 5 对Hive的理解 6 Apache Hive架构、组件 Hive组件 7 总结 Apache Hive是一款建立在Hadoop之上的开源数据仓库系统，可以将存储在Hadoop文件中的结构化、半结构化 数据文件映射为一张数据库表，基于表提供了一种类似SQL的查询模型，称为Hive查询语言（HQL），用于访问和 分析存储在Hadoop文件中的大型数据集。  Hive核心是将HQL转换为Ma
Apache Hive入门
太白_猿的博客
02-28 696
Hive入门（Hive概述、数据表（分桶、分区））
Apache Hive入门：模拟实现Hive功能、Hive架构、 组件
黑马程序员官方博客
08-18 687
Apache Hive是一款建立在Hadoop之上的开源数据仓库系统，可以将存储在Hadoop文件中的结构化、半结构化数据文件映射为一张数据库表， 基于表提供了一种类似SQL的查询模型， 称为Hive查询语言(HQL)， 用于访问和分析存储在Hadoop文件中的大型数据集。Hive核心是将HQL转换为MapReduce程序，然后将程序提交到Hadoop群集执行。Hive由Facebook实现并开源。...
Apache Hive 使用
yujinlong2002的博客
01-08 521
Apache Hive 使用
Hive面试题SQL测试题目1数据
08-31
文章Hive面试题SQL测试题目所需数据，包含建表语句 测试数据等等...................
Apache Hive面试题
02-19
### Apache Hive面试题详解 #### 一、Hive Metastore的三种模式 Hive Metastore服务主要用于存储Hive的元数据信息，包括表结构、分区信息等。Hive支持三种Metastore的存储模式： 1. **内嵌Derby方式**： - **...
大数据组件 Hive 面试题 + Hive 高频面试题
02-10
《Hive面试题详解：掌握核心知识点》 Hive，作为大数据处理的重要组件，其在面试中的重要性不言而喻。以下将深入探讨Hive的一些核心知识点，以帮助准备大数据面试的同学巩固知识。 首先，了解Hive的架构至关重要。...
HIVE面试题集锦201901
01-25
《HIVE面试题集锦201901》涵盖了Hive在大数据处理中的核心概念、功能以及在实际面试中常见的问题。以下是对这些知识点的详细解析： 1. **Hive简介**：Hive是基于Hadoop的数据仓库工具，可将结构化的数据文件映射为...
hive面试题 总结汇总
最新发布
03-08
hive面试题 总结汇总
Hadoop和HIVE面试题
08-09
本篇文章将深入探讨Hadoop和Hive的相关知识点，为面试做准备。 首先，我们来了解一下Hadoop。Hadoop是Apache软件基金会的一个开源项目，它提供了一个分布式文件系统（HDFS），用于存储和处理大规模数据。HDFS的设计...
hive面试题（Hadoop）
05-25
### Hive内部表与外部表的区别 #### 内部表特性 - **数据管理**：内部表的数据由Hive自身管理，这意味着数据的增删改查等操作完全由Hive控制。 - **存储位置**：默认情况下，内部表的数据存储于`hive.metastore....
Hive面试题SQL测试题目2数据
08-31
文章Hive面试题SQL测试题目所需数据，包含建表语句 测试数据等等...................
Hadoop和hive大数据面试题
05-20
Hive面试题通常会涉及以下主题： 1. Hive的架构：理解Hive的组成部分，如Hive Metastore、Driver、Compiler、Executor和SerDe。 2. 数据模型：Hive中的表、分区、桶的概念，以及如何利用这些特性优化查询性能。 3. ...
Apache Hive 使用详解
weixin_30480583的博客
10-18 116
目录： 　　为什么需要Hive ？ 　　Hive 的基本架构与运行流程 　　Hive 的基本语法 为什么需要 Hive ? 　　MapReduce 提供了基本的计算框架，但 MapReduce 的开发过程太啰嗦，很难适用于日常业务中的数据分析场景，对于数据分析，最常用，也是最方便的方式是采用 SQL 语句，大部分数据分析业务都可以通过 SQL 语句解决。为此，Yahoo公司开发了 P...
Hive 快速入门
u012351661的专栏
06-26 3731
原文  http://gitbook.cn/books/5924bd0523245b0aa3776b65/index.html Hive 快速入门 作者：鸣宇淳 前言 我写这篇文章的目的是尽可能全面地对Hive进行入门介绍，这篇文章是基于hive-1.0.0版本介绍的，这个版本的Hive是运行在MapReduce上的，新的版本可以运行在Tez上，会有一些不同。 Hive是对数据仓库进
大数据之Hive
chenpanjc799055的博客
12-28 240
Hive Author: Lijb Email: lijb1121@163.com Hive介绍： hive是基于Hadoop的一个数据仓库工具，可以用来进行数据踢群转换加载（ETL）,这是一种可以存储、查询和分析存储在Hadoop中的大规模数据机制。可以将结构化的数据文件映射为一张数据库...
Apache Hive部署与实战、客户端使用
黑马程序员官方博客
08-23 359
元数据(Metadata)，又称中介数据、中继数据，为描述数据的数据 (data about data)，主要是描述数据属性(property)的信息，用来支持如指示存储位置、历史数据、资源查找、文件记录等功能。​远程模式下beeline通过 Thrift 连接到单独的HiveServer2服务上，这也是官方推荐在生产环境中使用的模式。HiveServer2支持多客户端的并发和身份认证， 旨在为开放API客户端如JDBC、ODBC提供更好的支持。...
HIVE 面试题 理论
08-16
Hive是基于Hadoop的一个数据仓库工具，它可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。它的本质是将Hive查询语言（HQL）转化成MapReduce程序，在HDFS上存储数据，并在YARN上执行程序运行。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *3* [Hive面试题汇总大全](https://blog.csdn.net/hongmofang10/article/details/114447239)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"] - *2* [Hive面试题十道](https://blog.csdn.net/qq_38151907/article/details/131201249)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值