hive创建表后怎么新增分区结构（创建表时没有创建分区）

最新推荐文章于 2024-04-23 07:00:00 发布
最新推荐文章于 2024-04-23 07:00:00 发布
阅读量6k 收藏 9
点赞数 4
分类专栏： hive mysql 文章标签： hive 大数据 hadoop mysql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_38780623/article/details/126558977
版权

废话不多说，直接上

1、先介绍环境，我的hive元数据存在mysql中

2、hive元数据表和分区相关的表有哪些（hive的元数据表有很多，另外这图形界面我是用sqlyog连接查看的，你们可以直接进入mysql命令行用语句查效果一样）

 在上面所有的表，和分区有关的只有

        ① TBLS（这是记录创建表的元数据）

        ② PARTITION_KEYS (这是记录分区的元数据，其中分区的主键使用外键绑定了TBLS表的主键)

所以接下来我们直接向PARTITION_KEYS表中增加一条分区记录即可

增加分区前：我们可以看到stu表只有列名相关记录，是没有分区信息的

所有分区记录（21、22两张表可以在下面看到是属于另外两张表的分区信息）

 这个是我的表的元数据

最低0.47元/天 解锁文章
SolitaryWalker_0
关注
  • 4
    点赞
  • 踩
  • 9
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Hive增加列，调整列顺序，属性名等操作
ImezZ
10-24 6593
hive添加字段到指定位置 先添加字段到最后位置再移动到指定位置
Hive动态分区与建表、插入数据操作
nma_123456的专栏
06-14 2万+
1、定义 动态分区指不需要为不同的分区添加不同的插入语句，分区不确定，需要从数据中获取。 set hive.exec.dynamic.partition=true;//使用动态分区 (可通过这个语句查看：set hive.exec.dynamic.partition;)  set hive.exec.dynamic.partition.mode=nonstrict;//无限制模式 如果
【Hive-Partition】Hive添加分区及修改分区location
weixin_53543905的博客
07-04 2294
当我们在 Hive 中创建外表时，需要映射 HDFS 路径，数据落入到 HDFS 上时，我们在 Hive 中查询时会发现 HDFS中有数据，Hive 没有数据，那是因为我们在 HDFS 上的数据还没有成功修复至 Hive中，需要进行分区的修复（或者称之为添加分区）
43- 大数据-hive 修改表六：添加分区
yaoyelinger0912的博客
07-13 2743
1、静态分区 1> 添加一个 alter table t2 add partition (city=‘shanghai’); 2> 添加多个 alter table t2 add partition (city=‘chengdu’) partition(city=‘tianjin’); 3> 添加分区指定位置 alter table log_mess add partiti...
Hive 表添加列（新增字段）
最新发布
主要分享大数据相关的知识，如Spark、Hudi
04-23 1329
记录总结一下 Hive 表如何添加新的字段以及遇到的问题。最初是因为要验证 Hudi Schema Evolution 中的增加字段问题more对于某些文件类型，如ORC不存在该问题，而对于 Parquet、Text ，只有在已有分区下插入数据是，新增字段查询才为 NULL, 新增的分区正常。
hive创建表和增加表分区的两种方式
千淘万漉
11-29 3万+
hive表增加分区的两种方式 第一种方式：load data local inpath注意点： 1.必须是本地文件，不能是集群上的文件 2.文件路径中的变量如果无法替换，可以把单引号换成双引号，一般双引号总是没问题的 3.hive库在配置的时候有一个hdfs基础路径，用这种方式创建的表时可以不指定hdfs路径，导入数据后会自然在“hdfs基础路径/表名/”下生成相应的分区文件夹 4.用desc ...
Hive 分区表新增字段 cascade
qq_45124566的博客
03-14 3279
Hive 分区表新增字段 cascade
Hive的分区表
01-20
Hive分区表 Hive分区表对应的是HDFS上独立的文件夹，该文件夹存放的是该分区的所有数据，其实分区就是分目录。Hive通过分区把一个大的数据集根据业务需要分割成小的数据集，在查询时能够通过where关键词选择指定分区...
Hive分区表
01-07
一：简介 分区表就是根据指定字段的值进行分类、分组，字段值相同的分为一类然后存储在一个单独的HDFS文件中，多个类就存储在多个文件中。原本存储在一个文件中的数据现在存储在多个文件中，查询...动态分区：创建表
HIVE创建库创建表.docx
03-13
掌握HQL创建数据库，掌握HQL创建内部表、外部表、分区表 使用有location 和无location创建HIVE数据库，库名与自己的名字相关； 在数据集目录中选取2个数据文件内部表创建表，选取2个数据文件创建外部表。 使用美国...
hive分区表分通表建表语句详解和例子
11-01
详细描述了hive分桶表，分区表的创建，附带详细建表语句，包含一级静态分区，二级静态分区，一级动态分区，二级动态分区，分区的查询，删除，添加，数据的导入
Hive表分区
09-21
Hive表分区，里面有比较详细的Hive表分区方法，希望能够有所帮助。
Hive 添加分区(partition)后count 为0
三丰的专栏
06-07 1986
Hive 添加分区(partition)后count 为0
hive 建表 分区语句（仅供参考）
WJWFighting的博客
08-14 6247
create table test_01(               name string,               friends array<string>,               children map<string,int>,               address struct<street:string,city:string>)...
Hive分区表的分区操作
热门推荐
IT影风的博客
05-09 5万+
为了对表进行合理的管理以及提高查询效率，Hive可以将表组织成“分区”。一个分区实际上就是表下的一个目录，一个表可以在多个维度上进行分区，分区之间的关系就是目录树的关系。1、创建分区表通过PARTITIONED BY子句指定，分区的顺序决定了谁是父目录，谁是子目录。创建有一个分区的分区表：CREATE TABLE IF NOT EXISTS part_test(           c1     ...
hive 建立表结构 ，添加分区
qiezikuaichuan的专栏
04-30 1310
https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Types   drop table appuserprofile ;    CREATE EXTERNAL TABLE `appuserprofile`(   `mark` string,    `appkey` string,    `idfa`
Hive分区表新增字段+重刷历史方法(避免旧分区新增字段为NULL)
hjw199089的博客
01-14 1万+
1-1.建立测试表 hive> CREATE EXTERNAL TABLE table_for_test_add_column( > original_column string COMMENT '原始数据' > ) > COMMENT 'add_column的测试表' > PARTITIONED BY ( ...
hive修改 表/分区语句
weixin_34314962的博客
01-03 550
参考 https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL#LanguageManualDDL-AlterTable%2FPartitionStatements 这里主要列一些常用操作。   添加分区 ALTER TABLE table_name ADD PARTITION (partCol = 'val...
hive 创建分区表
08-31
Hive可以通过创建分区表来实现对数据进行分区管理。在创建分区表时，可以使用静态分区或动态分区的方式。 静态分区是指在创建表的时候就明确指定了分区的目录，每个分区需要使用一条插入语句来加载数据。这种方式适用于已经知道分区的情况。 动态分区是指根据查询结果动态地将数据分配到相应的分区中，而不需要指定分区目录。使用动态分区可以一次性插入多个分区的数据。Hive会根据实际的数据选择插入到哪一个分区。启用动态分区功能需要设置相应的参数，如`set hive.exec.dynamic.partition=true;`和`set hive.exec.dynamic.partition.mode=nostrick;`。这样就可以允许全部分区都是动态分区了。 需要注意的是，使用以上两种方法为内部分区表加载数据时，不需要预先创建分区。加载数据时会自动创建相应的分区。如果想要预先创建分区，可以使用`hadoop fs –mkdir`命令在表目录下先创建相应的分区目录，然后再使用`alter table add partition`语句增加分区。 综上所述，Hive可以通过静态分区或动态分区的方式来创建分区表，并根据需求选择合适的方法来管理分区数据。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* *3* [hive 分区表创建](https://blog.csdn.net/qq_45602114/article/details/119790780)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 100%"] [ .reference_list ]

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值