hive内部表与外部表

VIP文章 已于 2022-07-01 14:41:54 修改
阅读量275 收藏 1
点赞数
分类专栏： HIVE 文章标签： hive hadoop 大数据
于 2022-06-29 18:39:51 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44988131/article/details/125527242
版权

目录

一.内部表和外部表的区别

1.表的存储位置

  • 内部表存在hdfs指定位置（/user/hive/warehouse/），而且内部表的数据不共享数据；
  • 外部表存在外部（共享数据），可以通过外部工具查看，例如sqlyog等等（创建外部表时需要指定位置，也可以不指定放在默认位置）

2.在删除表的操作上

  • 内部表删除时，表的元数据（mysql）以及hdfs上的数据（原始数据）一并删除；
  • 外部表删除时，只删除表的结构（元数
最低0.47元/天 解锁文章
ln1°
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Hive内部表和外部表
01-07
一：内部表和外部表的区别 创建表时使用关键字external创建的表就是外部表，没有使用该关键字创建的表就是内部表。 删除表时(drop table)内部表会删除hdfs对应路径，而外部表不会删除hdfs对应的路径, 删除表无论是...
大数据学习-外部表&内部表详解
iilegend的博客
05-15 2509
外部表和内部表区别和实际运用： 前提知识储备： 1、hive存储的数据在hdfs上，建表的时候实际上是在hdfs上创建目录而已。 2、hive的元数据信息实际上是存在于mysql中（通常的做法） 3、访问hive的数据是先访问元数据再根据元数据的地址信息来获取数据 外部表和内部表在建表上的区别就是external（代表的外部表），外部表存储的方式是固定的hdfs路径，表是通过映射的方式访问（load数据到表中），而内部表的访问方式就是一个表和一个hdfs对应。所以在删除外部表的时候，...
Hive内部表和外部表的区别详解
热门推荐
Liu_Arvin的芝士小栈
10-30 13万+
Hive内部表和外部表的区别
【大数据】HiveQL关于数据库和表的操作命令
书山有路，学海无涯。记录成长，追逐梦想
05-31 1178
HiveQL 是 Hive 查询语言。Hive 和 MySQL 最接近，但二者仍存在显著差别。Hive 不支持行级插入操作、更新操作和删除操作。Hive 也不支持事务。
Hive内部表与外部表
蓝星部队的博客
11-06 3078
一、在Hive中创建表时，无external修饰的是内部表（managed table），有external修饰的是外部表（external table）： 1、内部表的数据是Hive自身管理，外部表数据由HDFS管理；  2、内部表数据存储的位置是hive在hdfs中存在默认的存储路径，即default数据库（默认：/user/hive/warehouse）。所以在该路径        下的表为...
第5章HiveQL：数据操作
weixin_43796003的博客
08-02 317
学习使用
HIVE 自建落地表
01-07
自建落地表为什么要自建落地表HIVE SQL创建内/外部表、分区表insert overwrite 向分区表插入数据 为什么要自建落地表 1、公司的大数据资源非常紧张， 2、导数逻辑很复杂； 3、日常导数要求时效性高； 4、部门数仓的...
Hadoop-2.8.0-HA-Hive安装部署与HQL10.hive的基本语法--内部表和外部表.mp4
04-30
Hadoop-2.8.0-HA-Hive安装部署与HQL10.hive的基本语法--内部表和外部表.mp4
kingcall#all-kinds-book#4 Hive—基础—内部表和外部表1
07-25
创建内部表CREATE TABLE ods.u_data (FIELDS TERMINATED BY '\t'当你建表成功并且把数据load 进去之后，你发现数
HIVE创建库创建表.docx
03-13
掌握HQL创建数据库，掌握HQL创建内部表、外部表、分区表 使用有location 和无location创建HIVE数据库，库名与自己的名字相关； 在数据集目录中选取2个数据文件内部表创建表，选取2个数据文件创建外部表。 使用美国...
Hive学习笔记（HiveQL数据查询基础）
qq_50834939的博客
11-30 2199
Hive学习笔记（HiveQL数据查询基础）HiveQL数据查询语句SELECT语句WHERE语句GROUP BY语句HAVING分组筛选ORDER BY语句和SORT BY语句HiveQL查询语句JOIN语句 HiveQL数据查询语句 SELECT语句 SELECT语法结构如下： SELECT */field1,field2....FROM tableName, 例：sogo表中结构信息如下： 查询sogo总条数代码： hive>SELECT cout(*) FROM sogo.sogo; 查
【大数据】HiveQL的查询操作
书山有路，学海无涯。记录成长，追逐梦想
06-02 811
HiveQL的查询操作。
Hive内部表在HDFS中的目录结构
我的博客
04-10 1万+
简要介绍了Hive内部表在HDFS的目录结构
Hive外部表操作
duan19056的专栏
12-13 1469
HIVE外部表：   1、创建外部表    create external table external_table(name string) location "/external/tables/users";   2、将数据从本地磁盘导入到hdfs文件系统    hadoop fs -put /usr/hadoop/test/test.txt /test      上述命令如果
hive的数据存储（元数据，表数据）和内部表，外部表，分区表的创建和区别作用
小爷欣欣
07-15 6951
hive的数据存储：首先弄清楚什么是元数据和表数据：元数据就是表的属性数据，表的名字，列信息，分区等标的属性信息，它是存放在RMDBS传统数据库中的（如，mysql）。表数据就是表中成千上万条数据了。hive的存储过程：启动hive时，会初始化hive，这时会在mysql中生成大约36张表（后续随着业务的复杂会增加），然后创建表，会在mysql中存放这个表的信息（不是以表的形式存在的，而是把表的属...
hive之内部表
lepton126的专栏
04-20 587
hive 内部表    hive的表与数据库中的表的概念是相似的，每一个表在HIVE中都有一个相对应的目录，该目录是存储数据的路径，所有表数据（不包括外部表）都保存在这个目录中，数据以文件的形式保存在hdfs文件系统上，表的元数据保存在元数据库中，本例中为mysql,删除内部表时，元数据和数据都会被删除。创建一个内部表1、表保存hdfs上的/user/hive/warehouse这个缺省目录hiv...
hive 双分区外部表 复合数据结构处理 json list map互相嵌套
jzy3711的博客
11-19 1万+
api="TopicHeatTrend" hadoop dfs -mkdir /jzytest/hive${api}/  hive -e 'create external table if not exists jzy'$api'json (  distribute map<string,map<string,int>>,  heatTrend array<struc...
hive中的内部表和外部表
qq_51666324的博客
10-23 2924
未被external修饰的是内部表（managed table），被external修饰的为外部表（external table）。 区别 1. 内部表数据由Hive自身管理，外部表数据由HDFS管理； 2.内部表数据存储的位置是hive.metastore.warehouse.dir（默认：/user/hive/warehouse），外部表数据的存储位置由自己制定（如果没有LOCATION，Hive将在HDFS的/user/hive/warehouse文件夹下以外...
hive内部表与外部表的区别
最新发布
04-23
好的，我明白了。关于您的问题：Hive中的内部表和外部表的区别在于，内部表的数据和元数据都存储在Hive的仓库（Warehouse）中，因此，当内部表被删除时，其所占用的存储空间也会被释放。而外部表则是指向在Hive仓库之外存储的数据文件或目录的表，因此当外部表被删除时，存储在外部数据源中的实际数据不会被删除。此外，当外部表被更新时，外部数据源中的实际数据也会被更新。希望这能满足您的需求。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值