greenplum 可用空间计算

最新推荐文章于 2023-06-30 16:56:55 发布
最新推荐文章于 2023-06-30 16:56:55 发布
阅读量1.3k 收藏
点赞数
分类专栏： greenplum
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u9999/article/details/8937109
版权

 

greenplum理论可用数据库空间：

     配置mirror ： database_size = usable_disk_space/ ( 2 + 1/3)   （greenplum 要保留一部分空间给工作空间用） 

     没有配置mirror ：database_size = usable_disk_space / ( 1 +1/3)

 

     usable_disk_space  = formate_disk_space *  0.7  (greenplum 建议空间要有30%空余）

     formate_disk_space = raw_capacity * raid_rate  (考虑到raid后空间会比裸空间少，所以要乘以一个系数，这个系数根据raid级别定）

 

滴水穿石
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Greenplum原理及其简介
JustinMars的博客
09-15 1129
Greenplum介绍 组织架构 Greenplum数据库是一种大规模并行处理（MPP）数据库服务器，其架构特别针对管理大规模分析型数据仓库以及商业智能工作负载而设计。 MPP（也被称为shared nothing架构）指有两个或者更多个处理器协同执行一个操作的系统，每一个处理器都有其自己的内存、操作系统和磁盘。 Greenplum数据库通过将数据和处理负载分布在多个服务器或者主机上来存储和处理大量的数据。Greenplum主要由Master节点、Segment节点、interconnect三大部分组成。
Greenplum的发展和原理介绍
击水三千里的专栏
09-10 510
Greenplum是一个面向数据仓库应用的关系型数据库,它基于流行的PostgreSQL开发,因为有良好的体系结构,所以在数据存储,高并发,高可用,线性扩展,反应速度,易用性和性价比等方面有非常明显的优势,非常受欢迎.进入大数据时代以后,Greenplum的性能在TB级别数据量的表现上非常优秀,单机性能相比Hadoop要快上好几倍,Greenplum有着完善的工具,整个体系都比较完善,
greenplum数据库引擎探究
weixin_30507269的博客
10-13 202
Greenplum做为新一代的数据库引擎，有着良好的发展与应用前景。强大的工作效率，低成本的硬件平台对数据仓库与商业智能建设有很大的吸引力。要清楚的了解其特点最好从架构着手。 架构分析 Greenplum的高性能得益于其良好的体系结构。Greenplum的架构采用了MPP(大规模并行处理)。在 MPP 系统中，每个 SMP 节点也可以运行自己的操作系统、数据库等。换言之，每个节点内的 CPU...
Greenplum原理介绍
qq_34552189的博客
07-13 1226
Greenplum原理介绍一、Greenplum介绍三、Greenplum架构1、Greenplum的总体架构图（摘要）：2、基本体系架构Master：Segment：四、OLTP和OLAP 一、Greenplum介绍   随着近些年数据量指数级的增加，传统的主机计算模式在海量的数据面前，不仅造价昂贵，而且技术也难以满足数据计算性能指标，传统主机的Scale-up模式遇到瓶颈，SMP(对称多处理)架构难于扩展，并且在cpu的计算和io吞吐上不能满足海量数据的计算需求。分布式存储和分布式计算理论被提出来，Go
GreenPlum如何查看表和数据库的数据量大小？
最新发布
石榴姐yyds
06-30 2060
GreenPlum如何查看表和数据库的数据量大小？
greenplum-7.0.0 版本包
04-27
1. **并行处理**：Greenplum通过MPP架构将数据分布在多个节点上，每个节点都有自己的内存和磁盘空间，可以并行处理查询，大大提高了处理速度。 2. **数据分片**：Greenplum将大型表分成多个小块，称为“段”，这些...
Greenplum数据库文档（中文）
08-15
- **MPP架构**：Greenplum采用了分布式数据库的设计，通过MPP架构将数据分散到多个节点上，每个节点都有自己的计算资源，实现并行处理。 - **段（Segment）**：数据在Greenplum中被分片存储在各个段上，每个段都是...
greenplum 企业应用实战
05-20
1. **分布式架构**：Greenplum采用MPP（大规模并行处理）架构，将数据分布在多个节点上，每个节点都有自己的内存和磁盘空间，通过高速网络进行通信，实现数据的快速查询和处理。 2. **自动分区**：Greenplum支持...
1.Greenplum架构
09-22
这种架构有助于实现高可用性和水平扩展能力，但也有其限制，例如，要访问所有数据，就必须所有节点都可用。 Greenplum系统由三个主要部分组成：Master Host、Segment Host和Interconnect。Master Host负责与客户端...
greenplum维护操作
11-09
- **说明**: 数据在各Segment间分布均匀对于充分利用并行计算优势至关重要。 #### 八、实例恢复 - **命令**: `gprecoverseg` - **说明**: 当通过`gpstate`或`gp_configuration`发现实例不可用时，使用此命令进行...
Greenplum释放AO表SHELL脚本
10-17
Greenplum支持行储存(HEAP储存)与列(append-only)储存,对于AO存储，虽然是appendonly，但实际上GP是支持DELETE和UPDATE的，被删除或更新的行，通过BITMAP来标记删除与修改。AO存储是块级组织，当一个块内的数据大部分都被删除或更新掉时，扫描它浪费的成本实际上是很高的。而PostgreSQL是通过HOT技术以及autovacuum来避免或减少垃圾的。但是Greenplum没有自动回收的worker进程，所以需要人为的触发。接下来就分析AO表与HEAP表的问题以及如何解答，执行空间的释放有3中方法分别是: 1、执行VACUUM。（当膨胀率大于gp_appendonly_compaction_threshold参数时），为共享锁。 2、执行VACUUM FULL。（不管gp_appendonly_compaction_threshold参数的设置，都会回收垃圾空间。），为DDL锁，需要慎用这个命令，会把CPU与IO沾满。 3、执行重分布。（不管gp_appendonly_compaction_threshold参数，都会回收垃圾空间。），为DDL锁
greenplum AO表进行垃圾回收释放空间脚本
知识的力量
05-23 813
目录 1、greenplum-inspect-ao 2、项目结构介绍 3、生成的CSV格式如下 1、greenplum-inspect-ao greenplum-inspect-ao 主要对AO进行垃圾回收释放，具体的请查看:https://blog.csdn.net/xfg0218/article/details/83031550 2、项目结构介绍 greenplum-insp...
greenplum 节点失败后恢复步骤
滴水穿石
03-06 4820
本文主要针对数据节点有mirror的情况。 1. 查看gp_segment_configration  表，判断down掉的节点。 2.排除故障后，恢复数据(对于4.2以前的版本建议重启数据库后做数据恢复） gprecoverseg 3.观察恢复是否完成 gpstate -s | grep Sync  （全部为 Synchronized 表示恢复完成） 4.平衡处理节点（如果主节点do
细说Greenplum时空数据分析
Greenplum中文社区
01-31 1122
技术长文 ...
【Greenplum】Greenplum 磁盘空间满了数据库宕机解决方法
w1992wishes的博客
09-11 4296
一、背景 后台一直往 Greenplum 数据库生成数据，由于没关注磁盘空间，导致数据存储空间利用率达到100%，数据库宕机无法启动。 当然上述情况是可以通过很多方式规避的： 利用率达到70%时扩展空间 利用率达到70%时清理数据库无用数据 在数据目录下放置大文件，在没有足够空间启动时通过删除大文件获取足够空间启动 …… 二、解决办法 2.1、删除 pg_log 目录下的文件...
Greenplum记录（二）：估计存储容量
weixin_33887443的博客
01-05 131
存储空间除了用来存储用户数据，还需要：landing backup files and data load files 空系统的存储空间：disk_size * number_of_disks 除去系统开销：(raw_capacity * 0.9) / 2 = formatted_disk_space 为了获取最佳性能，容量不超过70%：formatted_disk_space * 0.7 ...
查看GP空间
tianlianchao1982的专栏
03-23 1172
select table_schema,table_name,sz, cast ( cast(substring(sz,1,length(sz)-3) as decimal(18,2))* ( case when sz like '%k%' then power(10,-13) when sz like '%M%' then power(10,0) when sz like '%G%' then ...
Greenplum 空间(GIS)数据检索 B-Tree & GiST 索引实践 - 阿里云HybridDB for PostgreSQL最佳实践
DONGYUXIA15810857916的博客
08-28 2073
点击查看全文 标签 PostgreSQL , GIS , PostGIS , Greenplum , 空间检索 , GiST , B-Tree , geohash 背景 气象数据、地震数据、室内定位、室外定位、手机、车联网、还有我们最喜欢的“左划不喜欢、右划喜欢”，越来越多的位置属性的数据。将来会越来越多。 基于GIS的数据分析、OLTP业务也越来
配置级别greenplum 可用空间计算
weixin_33937499的博客
05-17 113
废话就不多说了，开始。。。       greenplum理论可用数据库空间：      配置mirror ： database_size = usable_disk_space/ ( 2 + 1/3)   （greenplum 要保留一部分空间给工作空间用）       没有配置mirror ：database_size = usable_disk_space / ( 1 +1/3) ...
GreenPlum部署与MPP架构详解
“章节二：预估存储容量”指导用户根据预期的数据量和业务需求计算所需的存储空间，这是部署前的重要规划工作。合理预估能确保系统的稳定运行和未来的扩展性。 “章节三：系统环境配置”和“章节四：安装前环境配置...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值