Greenplum资源管理——Resource Group进阶篇（面向DBA）

最新推荐文章于 2023-10-10 11:05:56 发布
最新推荐文章于 2023-10-10 11:05:56 发布
阅读量1.1k 收藏
点赞数
文章标签： dba postgresql 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u013970710/article/details/123382790
版权

Greenplum是一款广泛应用的开源MPP数据库的产品，兼容PostgreSQL生态，被广泛应用与大数据的存储与分析。

Resource Group是Greenplum的一种资源管理方式。Resource Group由GP5开始被支持，相比于早期的Resource Queue的资源管理方式，具有支持更细粒度的资源管理、 支持组内资源共享等优点。在前一篇文章《Greenplum资源管理——Resource Group使用和实现分析》中笔者结合源码介绍了Resource Group的基础机制，这篇文章主要是面向DBA，介绍Resource Group的常见用法、Resource Group相关的参数含义、作用原理和配置建议，以及Greenplum重点客户使用过程中疑问比较多的常见问题。

Resource Group基本用法

Resource Group是Greenplum默认的资源管理方式，其基本原理和使用场景在前一篇文章《Greenplum资源管理——Resource Group使用和实现分析》中已经有所介绍，这里简要介绍Resource Group的常用SQL以帮大家回忆其基本内容，如果想对

最低0.47元/天 解锁文章
airfan92
关注
GreenPlum 资源管理(基于linux cgroups)
MyySophia的博客
02-12 460
所有共享资源的系统都面临一个巨大的挑战—资源管理。当不同用户的多条语句同时在数据库中运行时，数据库需要巧妙地在这些用户这些语句中分配CPU、内存等资源，以便保证这些语句平稳运行。资源管理需要在公平性、确定性和最大资源利用率之间保持微妙的平衡，并且给予用户一些配置选择，以便适应不同的使用场景。公平性、确定性是指一个用户或者一个语句可以保证得到一部分资源，这部分资源在任何时候都不会被剥夺，这样用户的这个语句就相当于被保留了一个最小可用资源集合，不论这个语句执行得早与晚、快与慢，都至少可以获得这部分...
Greenplum 内存与负载管理(resource queue)最佳实践
MyySophia的博客
06-08 3210
目录 背景 如何避免OOM 哪些情况会引发OOM 如何避免OOM 如何配置内存相关参数 操作系统内核参数 数据库参数 内存参数计算例子 资源队列的使用 背景 Greenplum是一个重计算和重资源的MPP数据库，可谓有多少资源就能消耗多少资源，带来的好处是处理速度变快了，坏处就是容易用超。 CPU、网络、硬盘用超的话，关系不大，因为大不了就是到硬件瓶颈，但是内存用超的话会带来较大的负面影响，例如操作系统OOM用户进程，导致数据库崩溃等。 如果要达到非常强壮的稳定性，Green.
Greenplum Resource Group 资源组管理实用指南
Greenplum中文社区
08-31 630
...
Greenplum资源管理——Resource Group使用和实现分析
u013970710的博客
04-05 3437
Greenplum是一款广泛应用的开源MPP数据库的产品，兼容PostgreSQL生态，被广泛应用与大数据的存储与分析。 Resource Group是Greenplum的一种资源管理方式。Resource Group由GP5开始被支持，相比于早期的Resource Queue的资源管理方式，具有支持更细粒度的资源管理、 支持组内资源共享等优点。本文会介绍Resource Group的使用方式，从源码角度分析它的实现，以及介绍一些使用中遇到的高频问题。 Resource Group简介 Reso.
[转]Greenplum的工作负载及资源管理
weixin_34248849的博客
03-27 157
工作负载及资源管理 查询分析-查看EXPLAIN输出 EXPLAIN输出一个计划为节点组成的树 每个节点表示一个独立的操作 计划应该从下向上读，每个节点得到的记录向上传递 成本评估项： cost - 获取的磁盘页数，1.0等于一个连续的磁盘页读取；第一个评估是开始成本，第二个评估是总成本 rows - 输出的记录数，通常小于真实处理的数量。顶层节点评估的数量最接近真实值 width ...
Greenplum资源管理——Resource Queue常见使用问题
最新发布
u013970710的博客
10-10 310
Resource Queue（资源队列）是Greenplum最早的资源管理方式，能够对数据库的CPU、内存等资源进行限制，对多租户资源限制、保障数据库稳定运行具有一定的作用。
Greenplum资源管理——Resource Queue进阶篇（面向DBA）
u013970710的博客
03-09 1251
Greenplum是一款广泛应用的开源MPP数据库的产品，兼容PostgreSQL生态，被广泛应用与大数据的存储与分析。 ResourceQueue（资源队列）是Greenplum最早的资源管理方式，能够对数据库的CPU、内存等资源进行限制，对多租户资源限制、保障数据库稳定运行具有一定的作用。
第四节课 Greenplum 快速调优.pdf
04-09
本文档是关于Greenplum的快速调优指南，特别适合于已经具备一定基础但希望进一步提高对Greenplum系统调优能力的数据库管理员（DBA）。 集群规划是Greenplum数据库性能优化的一个重要方面，影响集群性能的因素包括...
Greenplum 6 磁盘配额管理工具“Diskquota”
Greenplum中文社区
05-21 1068
Diskquota是什么 Diskquota extension 是 Greenplum6.0 提供的磁盘配额管理工具,它支持控制数据库 schema 和 role 的磁盘使用量。当 DBA 为 schema 或者 role 设置磁盘配额上限后，diskquota 工作进程负责监控该schema和role的磁盘使用量，并维护超出配额上限的schema和role的黑名单。当用户试图往黑名单中的schema或者role中插入数据时，操作会被禁止。 Diskquota的典型应用场景是对于企业内部多个部门共享一个G
Greenplum4.2.2管理员指南 中文版
05-15
我个人认为对于各位有兴趣的技术人员来说，是一个很好的职业发展机会。以个人经验来说，只要有其它关系型数据库的基础，尤其是POSTGRESQL或者INFORMIX基础的(因为GREENPLUM是在POSTGRESQL基础上开发出来的)，很容就可以上手学习并掌握GREENPLUM。 GREENPLUM的手册写的非常好，完全可以作为入门的教材使用。其软件本身也是软性LICENSE，用于学习研究完全免费，而且与生产环境并无不同，这与ORACLE完全一样。
Greenplum数据库文档（中文版）
08-06
基于Greenplum官方文档的中文版手册，超级实用，文档结构清晰。Greenplum数据库的最佳实践
Greenplum官方学习手册
11-05
Greenplum 官方学习手册，看了还想看
greenplum 简介及数据库对比
08-21
greenplum 简介及数据库对比 。 greenplum hive infobright 对比。
细说Greenplum的资源管理策略
Greenplum中文社区
03-15 305
...
Greenplum资源队列
Sunhighlight的博客
05-07 890
资源队列语句 CREATE RESOURCE QUEUE G1 WITH (ACTIVE_STATEMENTS=10, MEMORY_LIMIT=‘200MB’)//创建资源列队：设置：活动数量10，内存200上限 CREATE RESOURCE QUEUE G1 WITH (ACTIVE_STATEMENTS=10)//创建资源队列活跃sql为10 select * from pg_...
greenplum学习笔记_工作量与资源管理
Turk的专栏
06-03 1345
1- 设定工作量管理服务配置参数 1) 使资源计划默认可用； 2) 可以设置如下资源限制参数： max_resource_queues：设置最资源队列数目 max_resource_portals_per_transaction：设置在一个事物中最大打开游标的数量； resource_select_only：如果设置成ON状态，则只有select /select in
Greenplum 6.9 资源组中文文档
fairyfar的专栏
08-16 2505
关于资源队列的中文文档请参考：用资源队列进行工作负载管理 一、资源管理 Greenplum Database（GPDB，下文简称GP）提供的特性可以帮助你根据业务需求按照优先顺序处理和分配资源，在没有可用资源的情况下不允许启动新的查询。 你可以使用资源管理功能限制查询并发数，执行查询使用的内存量，以及查询进程的CPU相对使用量等。GP提供了两种资源管理方案：资源队列（Resource Queues）和资源组（ Resource Groups）。 重要提示： 在RedHat 6.x 和 CentOS 6.x
Deepgreen(Greenplum) DBA常用运维SQL
weixin_33858485的博客
06-11 350
1.查看对象大小(表、索引、数据库等) select pg_size_pretty(pg_relation_size(’$schema.$table’)); 示例： tpch=# select pg_size_pretty(pg_relation_size('public.customer')); pg_size_pretty -----------...
Greenplum设置资源组及数据库初始化
song_quan_的博客
05-11 1026
我们采用资源组的形式管理数据库集群的内存、cpu等信息，现示例资源组的安装部署过程 非特殊说明，需要再集群每台机器执行 安装cgroup工具 yum install libcgroup-tools 配置gpdb使用硬件信息 vi /etc/cgconfig.d/gpdb.conf group gpdb { perm { task { uid = gpadmin; gid = gpadmin; ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值