9-大数据-hive内部表和外部表的区别

最新推荐文章于 2022-09-04 14:24:52 发布
最新推荐文章于 2022-09-04 14:24:52 发布
阅读量270 收藏
点赞数 1
分类专栏： bigdata-hive 文章标签： 大数据 hive 内部表与外部表区别
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yaoyelinger0912/article/details/95762401
版权

hive的元数据存储在RDBMS中，除元数据以外的其他所有数据基于hdfs存储

hive的表分为内部表、外部表、分区表和bucket表

hive内部表和外部表的区别：
1> 删除内部表，删除表元数据和数据
2> 删除外部表，删除元数据，不删除数据
3> 外部表从hdfs上load数据，其实是将目录转移。删除外部表后，外部表目录下的数据依然存在

大富的大数据之路
关注
专栏目录
【大数据Hive】Hive 内部表与外部表使用详解
congge_study的博客
07-15 6004
Hive 内部表与外部表使用详解
Hive学习笔记 --- Hive外部表和内部表的关系
杨鑫newlife的专栏
03-25 588
1.默认情况下是内部表（MANAGED_TABLE）； 2.外部表（External Table）创建的时候需要加上External关键字，并指定位置存储位置； 3.删除内部表会直接删除元数据（METADATA）以及存储数据；删除外部表仅仅会删除元数据，HDFS上的文件并不会删除； 4.内部表由数据由Hive自由管理，外部表数据由HDFS管理； 5.对内...
Hive内部表和外部表的区别
暁洣的博客
03-12 5860
区别 创建 内部表：内部表直接创建，不需要加关键字 create table if not exits xm_testA( KEHUMC VARCHAR(50) COMMENT '客户名称'， KEHUZH VARCHAR(50) COMMENT '客户号' ) COMMENT '客户信息表' 外部表：外部表的创建需要加上external关键字修饰，可以通过location指定...
大数据（Hive-外部表分区）
07-02 160
1：定义 未被external修改的是内部表(MANAGED TABLE)，被external修饰的为外部表(EXTERNAL TABLE) 创建外部表语法： create external table person2( id int, nam...
大数据学习-外部表&内部表详解
iilegend的博客
05-15 2619
外部表和内部表区别和实际运用： 前提知识储备： 1、hive存储的数据在hdfs上，建表的时候实际上是在hdfs上创建目录而已。 2、hive的元数据信息实际上是存在于mysql中（通常的做法） 3、访问hive的数据是先访问元数据再根据元数据的地址信息来获取数据 外部表和内部表在建表上的区别就是external（代表的外部表），外部表存储的方式是固定的hdfs路径，表是通过映射的方式访问（load数据到表中），而内部表的访问方式就是一个表和一个hdfs对应。所以在删除外部表的时候，...
Hive内部表和外部表的区别详解
热门推荐
Liu_Arvin的芝士小栈
10-30 13万+
Hive内部表和外部表的区别
Hive内部表和外部表，分区表和分桶表的区别详解
chenyh_csdn的博客
04-08 1056
转：https://blog.csdn.net/qq_36743482/article/details/78393678
Hadoop-2.8.0-HA-Hive安装部署与HQL10.hive的基本语法--内部表和外部表.mp4
04-30
Hadoop-2.8.0-HA-Hive安装部署与HQL10.hive的基本语法--内部表和外部表.mp4
大数据系列-Hive
07-31
4. **Hive与外部表**：内部表由Hive管理元数据及数据存储，删除操作会一并删除数据；外部表仅管理元数据，删除时不会影响底层数据，适合已存在的HDFS文件。 5. **Hive UDF（用户自定义函数）**：Hive允许用户扩展其...
大数据技术应用7-4Hive外部表和分区表操作
m0_51679196的博客
09-04 241
Hive外部表和分区表操作
Hive中的内部表和外部表
Cxf2018的博客
10-26 750
1.内部表和外部表的区别 内部表：加载数据到Hive所在的Hdfs目录，删除时，元数据和数据文件都删除 外部表：不加载数据到Hive所在的Hdfs目录，删除时，只会删除表结构，相比较之下，外部表更加安全，防止误删数据文件。 2.使用场景 内部表：做统计分析时候用到的中间表，结果表可以使用内部表，这些数据不需要共享，使用内部表更为合适。并且很多时候结果分区表我们只需要保留最近3天的数据，用外部表的时候删除分区时无法删除数据。 外部表：每天采集的ng日志和埋点日志，日志数据是采集程序实时采集进来的，一旦被
Hive关于内部表外部表以及分区表数据删除总结
吟啸徐行
03-27 3万+
1 内部表    创建内部表语句： create table dog(name string,id int) rowformat delimited fields terminated by " ";     a：本地加载数据  拷贝本地数据到/user/hive/warehouse/的对应目录下，所谓的对应是指对应的数据库的对应表目录下。本地数据不会删除。如果重复执行加载同一个数据
[hive] 关于内部表和外部表区别的误区
朱同学的博客
10-09 1000
网上相当一部分博客如此描述内外部表的区别 创建表时：创建内部表时，会将数据移动到数据仓库指向的路径；若创建外部表，仅记录数据所在的路径， 不对数据的位置做任何改变。 删除表时：在删除表的时候，内部表的元数据和数据会被一起删除， 而外部表只删除元数据，不删除数据。这样外部表相对来说更加安全些，数据组织也更加灵活，方便共享源数据。 创建表时数据会不会移动取决于以下两点 1 数据来源是本地还是hdf...
hive的数据存储（元数据，表数据）和内部表，外部表，分区表的创建和区别作用
小爷欣欣
07-15 7216
hive的数据存储：首先弄清楚什么是元数据和表数据：元数据就是表的属性数据，表的名字，列信息，分区等标的属性信息，它是存放在RMDBS传统数据库中的（如，mysql）。表数据就是表中成千上万条数据了。hive的存储过程：启动hive时，会初始化hive，这时会在mysql中生成大约36张表（后续随着业务的复杂会增加），然后创建表，会在mysql中存放这个表的信息（不是以表的形式存在的，而是把表的属...
【大数据_hive】内部表和外部表的区别
debimeng
01-14 1484
hive内部表和外部表的区别 1.数据管理  内部表数据由hive管理；外部表数据由HDFS管理； 2.存储位置 内部表数据存储位置为默认的路径(/user/hive/warehouse)； 外部表数据存储位置由用户自定义； 3.表删除 删除内部表会直接删除元数据和存储数据； 删除外部表仅仅删除元数据，HDFS上的文件不会删除；  ...
hive 内部表和外部表的区别和理解
thy822的专栏
05-17 1242
1. 内部表 create table test (name string , age string) location '/input/table_data'; 注：hive默认创建的是内部表 此时，会在hdfs上新建一个test表的数据存放地 load data inpath '/input/data' into table test ; 会将hd
大数据——Hive内外表区别、分区表、分桶表的使用
Vicky_Tang
08-10 1万+
一、Hive内部表和外部表概念？区别？最适合的应用场景？ 首先弄清楚什么是元数据和表数据：元数据就是表的属性数据，表的名字，列信息，分区等标的属性信息，它是存放在RMDBS传统数据库中的（如，mysql）。表数据就是表中成千上万条数据了。 hive的存储过程：启动hive时，会初始化hive，这时会在mysql中生成大约36张表（后续随着业务的复杂会增加），然后创建表，会在mysql中存放这个表的信息（不是以表的形式存在的，而是把表的属性以数据的形式放在mysql中，这样在hive中使用sql命令一样是
Hive中管理表（内部表）和外部表的区别是什么，及分区表使用场景
龙子木的博客
06-08 7169
Hive中管理表（内部表）和外部表的区别是什么，及分区表使用场景？ ⑴区别： ①Hive创建内部表时（默认创建内部表），会将数据移动到数据仓库指向的路径；创建外部表（需要加关键字external），仅记录数据所在的路径，不对数据的位置做任何改变； ⑵Hive删除表时，内部表的元数据和数据会被一起删除，而外部表只删除元数据，不删除数据； ⑵场景： ①外部表：比如某个公司的原
Hadoop-Hive 内部表/外部表 分区表/分桶表区别
qichangjian的博客
02-28 2195
1）hive中内部表和外部表的区别 内部表：又叫管理表，表的创建，和删除都由hive自己决定。 外部表：表结构上同内部表，但是存储的数据时自己定义的，外部表在删除的时候只删除元数据，原始数据时不能删除的。 内部表和外部表的区别主要体现在两个方面： 删除：删除内部表，删除元数据和数据；删除外部表，删除元数据，保留数据。 使用：如果数据的所有处理都在 Hive 中进行，那么倾向于 选择内部表，但是如...
Hadoop大数据处理：Hive内部表与外部表、索引及优化策略
内容包括Hive内部表与外部表的区别、Hive索引的使用和限制、Hive任务的调度以及列式存储格式如ORC和Parquet的优势。" 在Hadoop大数据环境中，Hive作为一种基于Hadoop的数据仓库工具，常用于处理和分析大规模数据。...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值