Hive应用-内部表、外部表应用

最新推荐文章于 2023-03-27 17:32:02 发布

略略略略岸

最新推荐文章于 2023-03-27 17:32:02 发布

阅读量262

点赞数

文章标签： hive 大数据 hadoop

本文链接：https://blog.csdn.net/BJYXSZDLHY/article/details/125833129

版权

本文介绍了Hive的安装步骤，包括下载安装包、配置环境变量、查看版本以及启动Hadoop和YARN。接着，详细讲解了内部表的应用，通过创建内部表`Student`并插入数据，演示了如何查询大于18岁的学生并按年龄升序排列。

摘要由CSDN通过智能技术生成

Hive安装

标题

下载apache-hive-3.1.2-bin.tar.gz，解压安装包，创建hive目录和临时目录

在这里插入图片描述

标题修改环境变量

vi /etc/profile

在这里插入图片描述

查看hive版本

hive  --version

进hive安装目录下的conf目录 cd /home/hive/apache-hive-3.1.2/conf

在这里插入图片描述

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

略略略略岸

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

大数据之Hive数据库与表操作

weixin_43339889的博客

11-07

1058

Hive数据库和表操作

MySQL数据库—创建数据库与数据表

Junds0的博客

10-18

3954

关系数据库中，数据表是以行和列的形式组织而成的二维表，数据存在于行和列相交的单元格中，表结构中的一行表示一条唯一的记录，一列表示一个字段，唯一标识一行记录的属性或属性组称为主键。创建完数据库后需要创建数据表，并确定表中各个字段列的名称、数据类型、数据精度、是否为空等属性。当系统需求变更或设计之初考虑不周等情况发生时，就可能需要对数据表的结构进行修改，包括添加新的约束，修改及删除原有约束等。当系统需求变更或设计之初考虑不周等情况发生时，就可能需要对数据表的结构进行修改，包括修改数据表名及字段排列顺序等。

参与评论您还未登录，请先登录后发表或查看评论

HIVE的基础知识内部表与外部表

共享，共进步

07-07

580

HIVE:将结构化的数据文件映射为数据库表查询语句简便话，类SQL语言；表在hdfs中表现为文件夹准备工作(要先启动hadoop和zookeeper) [root@hadoop151 hive]# jps 15105 Jps 7715 NodeManager 2855 QuorumPeerMain 7303 DataNode 7179 NameNode 7455 SecondaryNameNode 7599 ResourceManager 启动之后应该要有的程序启动HIVE [root@hado

Hive中的内部表和外部表（面试题）

Jaserok的博客

11-14

774

内部表创建： table type : manage_table location: /user/hive/warehouse/ruoze_emp 等等在HDFS和Mysql上都有数据外部表创建 CREATE EXTERNAL TABLE ruoze_emp_external ( empno int, ename string, job string, mgr int, hiredate ...

分布式数据库NoSQL(三)——MongoDB 文档的高级查询操作

m0_64139004的博客

09-29

5520

通俗的说，游标不是查询结果，而是查询的返回资源，或者接口。通过这个接口，你可以逐条读取。就像 fopen 打开文件，得到一个资源一样，通过资源，可以一行一行的读文件。

Hive 外部表和内部表

czxylzl的博客

12-04

1699

外部表：外部表说明：外部表因为是指定其他的hdfs路径的数据加载到表当中来，所以hive表会认为自己不完全独占这份数据，所以删除hive表的时候，数据仍然存放在hdfs当中，不会删掉管理表和外部表的使用场景：每天将收集到的网站日志定期流入HDFS文本文件。在外部表（原始日志表）的基础上做大量的统计分析，用到的中间表、结果表使用内部表存储，数据通过SELECT+INSERT进入内部表。操作...

hive外部表改为内部表_Hive内部表与外部表的区别

weixin_42631411的博客

01-13

470

1.未被external修饰的是内部表【managed table】，被external修饰的为外部表【external table】。2.内部表数据由Hive自身管理，外部表数据由HDFS管理。3.内部表数据存储在hive.metastore.warehouse.dir【默认:/user/hive/warehouse】，外部表数据存储位置由用户自己决定。4.删除内部表会直接删除元数据【metad...

hive内部表与外部表的区别及使用场景

晓晓的天空

04-29

3692

hive内部表与外部表的区别以及使用场景

Hive的内部表、外部表、分区表和分桶表

cc876的博客

09-28

1642

hive是基于Hadoop的一个数据仓库工具，用来进行数据提取、转化、加载，这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。hive数据仓库工具能将结构化的数据文件映射为一张数据库表，并提供SQL查询功能，能将SQL语句转变成MapReduce任务来执行。Hive的优点是学习成本低，可以通过类似SQL语句实现快速MapReduce统计，使MapReduce变得更加简单，而不必开发专门的MapReduce应用程序。hive十分适合对数据仓库进行统计分析。 ...

Hive内部表外部表区别及各自使用场景【附录：常规DDL样例】

留歌__36的博客

12-20

2061

写在前面 ps:干货很多… 我们都知道，Hive基本上就是内部表和外部表两种类型，在面试的时候，常会问到这种题目： 1.hive内部表和外部表的区别 2.什么时候使用内部表,什么时候使用外部表来自官网的定义： Managed tables A managed table is stored under the hive.metastore.warehouse.dir path property, by default in a folder path similar to /user/hive/wareh

数据库系统原理与实现-educoder实验一

最新发布

weixin_46688818的博客

03-27

1289

在实际开发中，用户可以根据自己的需求，通过视图的方式，获取基本表中自己需要的数据，这样既能满足用户的需求，也不会破坏基本表原来的结构，从而保证了基本表中数据的安全性。但对于海量数据来说，它的目录也是很大的，不可能全部存储在内存中，因此索引往往是存储在磁盘上的文件中（可能存储在单独的索引文件中，也可能和数据一起存储在数据文件中）。指在多个字段上创建的索引，在多个字段上创建的普通索引和唯一索引都是组合索引，所谓组合实际是字段的组合，对于多个字段上的唯一索引，要求组合字段必须唯一。视图数据来自定义视图的查询表。

Hive学习(二)知识点整理

滴水穿石的博客

11-13

1878

Hive一、Hive简介？二、Hive的结构三、Hive的原理四、Hive的数据管理五、Hive的调优六、Hive环境搭建和部署一、Hive简介？ hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。其优点是学习成本低，可以通过类SQL语句快速实现简单的MapReduce统计，不必...

大数据学习-外部表&内部表详解

iilegend的博客

05-15

2613

外部表和内部表区别和实际运用：前提知识储备： 1、hive存储的数据在hdfs上，建表的时候实际上是在hdfs上创建目录而已。 2、hive的元数据信息实际上是存在于mysql中（通常的做法） 3、访问hive的数据是先访问元数据再根据元数据的地址信息来获取数据外部表和内部表在建表上的区别就是external（代表的外部表），外部表存储的方式是固定的hdfs路径，表是通过映射的方式访问（load数据到表中），而内部表的访问方式就是一个表和一个hdfs对应。所以在删除外部表的时候，...

hive 内部表、外部表、使用场景举例、内部表与外部表转换

热门推荐

不是一枚开发

06-29

5万+

默认创建的表都是管理表（），即内部表； Hive控制：默认情况下会将内部表的数据存储在由配置项所定义的目录的子目录下。当删除一个内部表时，Hive同时会删除表中的数据；内部表不适合与其他工具共享数据。查询表的类型可以让用户创建一个外部表，（内部表和外部表建表均可指定）；在删除表的时候，Hive认为其并非完全拥有外部表的数据的所有权。删除外部表仅删除描述表的元数据信息，数据会被保留。（1）准备一份emp.txt文件上传到hdfs （2）在hive上创建外部表，并指定

Hive内部表及外部表

weixin_44246850的博客

01-06

1万+

1、内部表内部表，也叫托管表，是Hive在创建表时的默认表。特点：在内部表被删除后，表的元数据和表数据都从HDFS中完全删除 ①：首先创建一个student内部表 hive> create table if not exists student( > id string, > name string > ) > row format delimited > fields terminated by '\t'; ②查看

hive创建表(内部表和外部表）

now

01-24

1万+

一、理论 1）建表语法 CREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name [(col_name data_type [COMMENT col_comment], ...)] [COMMENT table_comment] [PARTITIONED BY (col_name data_type [COMMENT col_comment], ...)] [CLUSTERED BY (col_name, col_nam

Hive内部表和外部表

TRX的博客

01-19

3495

Hive表分为两类，即内部表和外部表。内部表（managed table）所谓内部表（managed table）即Hive管理的表，Hive内部表的管理既包含逻辑以及语法上的，也包含实际物理意义上的，即创建Hive内部表时，数据将真实存在于表所在的目录内，删除内部表时，物理数据和文件也一并删除。外部表（external table）外部表（external table）则不然，其管理仅仅是在逻辑和语法意义上的，即新建表仅仅是指向一个外部目录而已。同样，删除时也并不物理删除外部目录，而仅仅是

外部表在Hive中的使用

MOL

08-03

7865

1.Table Type: MANAGED_TABLE :内部表删除表：HDFS上的数据被删除并且Meta也被删除 2.创建外部表emp_external： create external table emp_external( empno int, ename string, job string, mgr int, hiredate string, sal double, comm double, deptno int )row format delimited fields ter

hive中内部表与外部表的区别

02-14

Hive中的内部表与外部表的区别如下: 1. 数据存储：内部表的数据存储在Hive的数据仓库中，外部表的数据存储在...综上所述，在Hive中，内部表适用于临时存储数据，外部表适用于永久存储数据，并与外部应用程序共享数据。