hive 查看表的存储大小

塞上江南o

已于 2023-11-13 10:06:48 修改

阅读量515

点赞数

分类专栏： Hive 文章标签： hive

于 2019-10-13 08:50:54 首次发布

本文链接：https://blog.csdn.net/qq_43192537/article/details/102529408

版权

Hive 专栏收录该内容

46 篇文章 4 订阅

订阅专栏

文章目录

1、先获得某表在hdfs的存储位置

desc formatted good_promotion;

在这里插入图片描述

2、客户端中（datagrip、dbeaver、shell黑窗口）可执行以下语句

-- 加/* 是因为这个表可能有多个分区或者分桶
dfs -du  -h   hdfs://hadoop102:8020/user/hive/warehouse/practice_hive.db/good_promotion/*；

在这里插入图片描述

3、服务器中可执行以下语句

hadoop fs -du  -h hdfs://hadoop102:8020/user/hive/warehouse/practice_hive.db/good_promotion;

在这里插入图片描述

优惠劵

塞上江南o

关注关注

0
点赞
踩
1

收藏

觉得还不错? 一键收藏
1
评论
hive 查看表的存储大小

hive 查看某表的大小
复制链接

扫一扫

专栏目录

如何用Apache Kylin让Hive表查询提速千百倍

07-02

如何用Apache Kylin让Hive表查询提速千百倍如何用Apache Kylin让Hive表查询提速千百倍如何用Apache Kylin让Hive表查询提速千百倍

Hive通过元数据库获取表的数据量，占用空间(包括分区表的)

爱米酱的博客

06-22

2221

SELECT a.TBL_ID, d.`NAME` dbName, a.TBL_NAME, b.PARAM_VALUE numRows, c.PARAM_VALUE totalSize FROM TBLS AS a left JOIN TABLE_PARAMS AS b on a.TBL_ID = b.TBL_ID left JOIN TABLE_PARAMS AS c on a.TBL_ID = c.TBL_ID left JOIN DBS as d on d.DB_ID = .

1 条评论您还未登录，请先登录后发表或查看评论

hive真实表空间大小统计

硅谷工具人

03-05

2347

如果是采用hdfs上传加载的表、或者是flume直接写hdfs的表空间通常看hive的属性是不准确的。

hive表占用的存储空间大小

Learning

06-24

2709

hadoop fs -du /user/hive/warehouse/table_name|awk '{ SUM += $1 } END { print SUM/(1024*1024*1024)}'

Hive查看表大小(所占的磁盘空间大小)

热门推荐

iiiitttttt的博客

03-25

1万+

查看该hive表的总容量大小单位为G [root@hadoop225 ~]$ hadoop fs -du /user/hive/warehouse/src.db/user/user_account|awk ' { SUM += $1 } END { print SUM/(1024*1024*1024) }'

Hive下查看表占用空间大小的方法

weixin_43725940的博客

04-21

7483

一、Hive下查看数据表信息的方法方法1：查看表的字段信息 desc table_name; 方法2：查看表的字段信息及元数据存储路径 desc extended table_name; 方法3：查看表的字段信息及元数据存储路径 desc formatted table_name; 备注：查看表元数据存储路径是，推荐方法3，信息比较清晰。二、查看表容量大小方法1：查看一个hive表文件总大小...

012 大数据之HIVE查询

小哥哥咯的博客

01-06

2132

1、DBeaver连接HIVE查询实战 1.1、HiveServer2的相关知识 Hive架构之HiveServer2 Prerequisites: Have Hive installed and setup to run on Hadoop cluster. HiveServer2 a.k.a HS2 is a second-generation Hive server that enables： ① Remote clients to execute queries against the Hive s

hive查看表大小

dkk2014的博客

11-01

2770

10-22

01-07

hive根据y的大小，决定抽样的比例。例如，table总共分了4份，当y=2时，抽取(4/2=)2个bucket的数据，当y=8时，抽取(4/8=)1/2个bucket的数据。 x表示从哪个bucket开始抽取，如果需要取多个分区，以后的分区号为当前...

h6hive:像蜂巢一样的六角形向量

05-06

安装npm仅适用于GitHub存储库： npm i main76/h6hive -s蜂巢蜂巢就像一棵树，但并不完全相同。子节点是水平六边形。目前它的大小也是固定的。我可能会考虑在将来实现可扩展的Hive类。Axios x轴： :down_arrow: y...

bootstrap：用于创建Hive Solutions开发环境的Bootstrap脚本

02-28

创建这组脚本是为了简化包含Hive解决方案基础结构的各种项目的部署。快速开始下载。在目标存储库目录中运行命令python bootstrap.py --download来下载和... 引导操作可能需要一段时间，具体取决于存储库的当前大小。

java 大数据 spark flink redis hive hbase kafka 面试题数据结构算法设计模式.zip

最新发布

01-14

例如，数组的连续存储，链表的动态分配节点，树和图的邻接矩阵或邻接表表示等。基本操作：针对每种数据结构，定义了一系列基本的操作，包括但不限于插入、删除、查找、更新、遍历等，并分析这些操作的时间复杂度和...

hive 与 kylin的搭建

无聊小刚的博客

12-26

7769

hive安装前言由于kylin现在最高支持的hive版本为1.2.1，所以只能安装此版本，不能安装hive2.0。使用hive需要事先安装好ant，具体安装过程不进行介绍，还需要一个mysql来保存hive的元数据。编译hive 编译hive一定要保证网络通畅，编译过程中会出现个别的包无法下载，导致错误，换个时间或者调整网络环境，从新编译，就可以了解压源码包。进行编译。

hive 查看一个表的总文件大小方法

duncan

11-12

3754

要查看一个hive表文件总大小时，我们可以通过一行脚本快速实现，其命令如下： $ hadoop fs -ls /user/hive/warehouse/test_table/ds=20151111|awk -F ' ' '{print $5}'|awk '{a+=$1}END{print a}' 32347122009 这样可以省去自己相加，下面命令是列出该表的详细文件列表...

hive 查看表大小

令狐二中

02-24

2180

因为hive底层数据存储用的还是hadoop，所以查看表大小可以直接用hadoop提供的查看文件目录命令： hadoop fs -count -q -h hive表所在目录 -h是将字节显示转为GB的方式显示。

使用hql查询hive表的所占存储空间

03-28

使用HQL查询Hive表的所占存储空间可以使用以下语句： ``` SHOW TABLE EXTENDED LIKE '<tablename>' PARTITION (<partition_key>=) ``` 其中，`<tablename>`是需要查询的表名，`<partition_key>`和`...

“相关推荐”对你有帮助么？

非常没帮助
没帮助
一般
有帮助
非常有帮助

提交