Hive中location的理解

最新推荐文章于 2024-06-01 14:15:42 发布
最新推荐文章于 2024-06-01 14:15:42 发布
阅读量1.3k 收藏 1
点赞数 1
文章标签： java 开发语言
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_51981189/article/details/127304608
版权

location的意思大概就是 在你那个路径缔造一个逻辑表 一个表的结构而已 但其实不存在 表中的内容就是你那个路径下面的文件

相当于查表等于查询这个链接（本来作用就会指定一个加载数据的路径）

所以location一般和外部表一起连用 每次要查这个数据的时候直接location这边 然后再删除这个表就行了（反正不影响这个文件） 但是如果是内部表 就会把这个数据给删掉 以后就用不着了

外部表和内部表的区别：

外部表是一个文件夹 实打实地在hdfs的默认路径上看得到

但你真正查询的还是它的这个所谓结构下的文件 当你删除了外部表 mysql中存储的那些这个表的元数据会被删除 但hdfs上的这个表的文件夹包括里面的数据并不受影响 仍然可以随意查询 想要删只能rmr

后季暖
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
hive外部表改为内部表_Hive内部表和外部表
weixin_39809584的博客
12-22 834
前言总结一下Hive的内部表和外部表以及两者的区别。1、建表语句1.1 内部表平时创建的普通表为内部表createtable`test_internal`(idstringcomment'ID',namestringcomment'名字')comment'测试内部表'ROWFORMATDELIMITEDFIELDSTERMINATEDBY',';外部表带exter...
hive-mysqlhive-mysql
11-20
标题中的“hive-mysql”暗示了本主题将探讨Hive与MySQL之间的集成。Hive是Apache Hadoop项目的一部分，主要用于处理和存储大规模数据集，而...通过理解这两个系统的交互，我们可以更好地管理和利用大数据环境中的信息。
hive 中的location
热门推荐
weixin_44736028的博客
05-21 1万+
hive ##官方注释 LOCATION一般与外部表（EXTERNAL）一起使用。一般情况下hive元数据默认保存在<hive.metastore.warehouse.dir>中。 EXTERNAL表指向其存储的任何HDFS位置，而不是存储在configuration属性指定的文件夹中hive.metastore.warehouse.dir 如： CREATE EXTERNAL TABLE page_view (viewTime INT, userid BIGINT, pa
查看Hive表的描述信息，包括在HDFS上的Location信息
最新发布
青春不流名
06-01 1352
DESCRIBE FORMATTED 表名;
hive locations 导出
mnasd的博客
05-10 362
select tbls.TBL_NAME,tbls.SD_ID,SDS.LOCATION from tbls,SDS where tbls.SD_ID=SDS.SD_ID and tbls.TBL_NAME="user_loss_analysis_04 "; hive mysql172.16.17.100数据库查找 库 表 分区 location 信息 SELECT tmp2.NAME, tmp...
hive的location和External
wang5g的博客
07-21 1401
无
Hive(5):关键字段使用LOCATION/DROP
小蚯蚓的博客
11-05 9332
一、LOCATION字段 1.适用的场景（多使用在外部表的场景下） 当数据已经存在hdfs上，并且不能随意移动这个数据，这个数据也不能被修改想使用这个数据的时候，只能指定location，建表的时候也可以使用location 2.例子 （1）创建数据库，通过location，指定在hdfs的路径。 这样数据库存储位置就是'/locate'，而非默认的'/user/hive/wareh...
Hive SQL语法总结
01-20
总的来说，Hive SQL语法为数据分析师和数据科学家提供了方便的工具，使他们能够在Hadoop集群上处理大规模数据，而无需深入理解MapReduce的工作原理。然而，由于其批处理性质，Hive不适合需要快速响应时间的在线事务...
HIVE创建库创建表.docx
03-13
在Hadoop生态系统中，Hive是一个基于Hadoop的数据仓库工具，它允许用户使用SQL-like查询语言（HQL）来处理和分析存储在Hadoop中的大数据。本实验旨在深入理解Hive的基本操作，包括创建数据库、内部表、外部表以及...
Apache Web日志Hive实验数据
01-16
在Hive中，首先我们需要创建一个外部表来指向`apache_log.txt`文件，定义表的字段与日志文件中的列相对应。例如，表结构可能包含以下字段： 1. `ip`：客户端IP地址，字符串类型。 2. `timestamp`：访问时间，日期...
Hive大表的测试数据
07-31
在大数据处理领域，Hive是一种基于Hadoop的数据仓库工具，它允许用户使用SQL类查询语言（HQL）来处理和分析存储在Hadoop文件系统（HDFS）中的大规模数据集。"Hive大表的测试数据"这个主题，通常涉及到以下几个关键...
hive建外部表时location修改问题
u011250186的博客
05-13 3277
一、有一次建外部表的时候，忘记设置location create external table test.ads_education_course_feature_dm ( course_id string comment '课程id', course_name string comment '课程name', detail_browser_times string comment '详情页浏览次数', exposure_convert_borwser_rate string commen...
使用有location 和无location创建HIVE数据库
qq_52770248的博客
11-21 830
适合初学者练手
5.Hive表修改Location，一次讲明白
每天进步一点点
01-27 2198
Hive中偶尔会遇到需要调整表Location的情况，这篇文章给出了相应的解决方案，以供参考。
更改hive表location指向
barry8023的博客
10-25 1141
1.更改DBS表中的location字段 2.更改SDS表中的location字段 非分区表： UPDATE DBS JOIN TBLS JOIN SDS ON DBS.DB_ID = TBLS.DB_ID AND TBLS.SD_ID = SDS.SD_ID SET SDS.LOCATION = REPLACE ( `LOCATION`, '原始路径前缀', '目标路径前缀‘) WHERE DBS.`NAME` = '库名' AND TBLS.TBL_TYPE = 'MANAGED_T...
Hive创建表
zhaoxiaoba123的博客
09-01 4513
建表语法 字段解释说明 (1)CREATE TABLE 创建一个指定名字的表。如果相同名字的表已经存在，则抛出 异常;用户可以用 IFNOTEXISTS 选项来忽略这个异常。 (2)EXTERNAL 关键字可以让用户创建一个外部表，在建表的同时指定一个指向实际 数据的路径(LOCATION)，Hive 创建内部表时，会将数据移动到数据仓库指向的路径,若创建外部表仅记录数据所在的路径不对数据的位置做任何改变。在删除表的时候，内部表的元数据和数据会被一起删除，而外部表只删除元数据不删除数据。 (3
Hive内部表和外部表
ShaneHolmes
03-10 285
Hive专栏 上一篇 主目录 下一篇 目录1 两者的区别2 外部表和内部表的选择 【前言】 Hive 中有内部表和外部表的概念，本文进行介绍 在删除表的时候，内部表的元数据和数据会被一起删除，而外部表只删除元数据，不删除数据。（经典面试问题） 1 两者的区别 未被extern...
Hive外部表操作
duan19056的专栏
12-13 1472
HIVE外部表：   1、创建外部表    create external table external_table(name string) location "/external/tables/users";   2、将数据从本地磁盘导入到hdfs文件系统    hadoop fs -put /usr/hadoop/test/test.txt /test      上述命令如果
Hive的一些基本操作
newchitu的博客
06-05 275
目录 1. Create Table 1.1介绍 1.2 语法 1.3 基本示例 1.4 创建分区 2. Alter Table 2.1 添加分区 2.2 删除分区 2.3 重命名表 2.4 修改列/属性 2.5 添加/替换列 3. 创建视图 4. 显示表 5. 加载 5.1 语法 6. 插入 6.1 INSERT语法 6.2 WRITE语法 7. 删除 ...
hive中LOCATION
06-08
在 Hive 中，`LOCATION` 是用来指定表或分区数据的存储位置的关键字。当你创建一个外部表时，你需要使用 `LOCATION` 参数来告诉 Hive 表数据的位置，因为外部表的数据通常不由 Hive 管理，而是由外部系统或者其他工具来管理和维护。 在创建表的时候，你可以使用以下语法来指定 `LOCATION`： ``` CREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name ( column1 data_type, column2 data_type, ... ) [PARTITIONED BY (partition_column data_type, ...)] [ROW FORMAT row_format] [STORED AS file_format] [LOCATION hdfs_path]; ``` 其中，`hdfs_path` 是数据存储的路径，它可以是一个 HDFS 路径，也可以是一个本地文件系统路径（当 Hive 运行在本地模式时）。注意，如果你想要在 Hive 中读取外部数据，那么你需要确保 Hive 连接到的 Hadoop 集群和数据存储位置是一致的。 如果你已经创建了一个表，但是需要更改它的 `LOCATION`，你可以使用以下语法来修改： ``` ALTER TABLE table_name SET LOCATION 'hdfs_path'; ``` 这个命令会将表的数据移动到新的路径，所以在执行之前请确保你有足够的权限操作 HDFS。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

后季暖

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值