提高数据库查询速度HIVE

文章介绍了Hive中的静态分区表概念,通过创建分区(如year字段)来逻辑组织数据并物理存储为目录。在数据录入时,使用`LOADDATAINPATH`命令将数据加载到指定分区。这种方法可以减少查询时的数据量,从而提高查询效率。
摘要由CSDN通过智能技术生成

hive分区表 partition

内部表 外部表 数据表逻辑存储和数据物理存储

查询 查询速度慢

通过减少查询的数据量以提高查询速度

分区实现

create database test11;
use tese11;

一、 静态分区表

1. 创建静态分区

create table t1(id int,name string) partitioned by (year string);

分区字段(year)逻辑上有呈现 实际存储 以目录的方式呈现

2. 分区表录入数据

步骤一:本地创建一个a.txt文件,将需要的录入数据导入
vi a.txt


1 zangsan 20
2 lisi 21
3 wangwu 22
步骤二:将文件上传到集群
hdfs dfs -put a.txt /a.txt

步骤三:进入hive,将数据录入
load data inpath '/a.txt' into table t1 partition(year='2021');
select * from t1;

/***
 *             ,%%%%%%%%,
 *           ,%%/\%%%%/\%%
 *          ,%%%\c "" J/%%%
 * %.       %%%%/ o  o \%%%
 * `%%.     %%%%    _  |%%%
 *  `%%     `%%%%(__Y__)%%'
 *  //       ;%%%%`\-/%%%'
 * ((       /  `%%%%%%%'
 *  \\    .'          |
 *   \\  /       \  | |
 *    \\/         ) | |
 *     \         /_ | |__
 *     (___________))))))) 攻城湿
 */

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

鸷鸟之不群

你的鼓励将是我最大的动力。

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值