greenplum segment节点异常恢复——笔记

最新推荐文章于 2022-12-06 17:15:32 发布
最新推荐文章于 2022-12-06 17:15:32 发布
阅读量1.5k 收藏 2
点赞数
分类专栏： 数据库 文章标签： greenplum
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44466805/article/details/90437785
版权

由于昨晚扩容节点异常，报错是说内存不足，当时没太在意就放之不管，而后今早过来发现很多mirror的节点时Failed状态。

gpstate -m
此命令选项是查看全部的mirror节点是否正常

发现有Failed状态，然后使用gprecoverseg的命令修复他

[gpadmin@gpceshi1 ~]$ gprecoverseg -o ./hiya
生成恢复的配置文件
[gpadmin@gpceshi1 ~]$ cat hiya
filespaceOrder=
gpceshi2:40000:/ssd_data/gpdata/primary/gpseg1
gpceshi2:50001:/ssd_data/gpdata/mirror/gpseg2
gpceshi2:40001:/ssd_data/gpdata/primary/gpseg3
gpceshi2:50002:/ssd_data/gpdata/mirror/gpseg4
gpceshi2:50008:/ssd_data/gpdata/mirror/gpseg10
gpceshi2:50009:/ssd_data/gpdata/mirror/gpseg11
gpceshi2:50010:/ssd_data/gpdata/mirror/gpseg12
gpceshi2:50011:/ssd_data/gpdata/mirror/gpseg13
可以从配置文件里看到有哪些节点需要恢复，顺便跟gpstate -m的回显信息对比一下是否完整

使用-i选项读取配置文件进行恢复

[gpadmin@gpceshi1 ~]$ gprecoverseg -i hiya
恢复完成之后再次查看mirror节点状态
[gpadmin@gpceshi1 ~]$ gpstate -m

最后正常之后进行角色对调，在修复后，之前角色变换的mirror不会立即切换过来，这样会导致一些主机上工作的segment节点过多引起性能瓶颈问题，所以需要恢复segment原先的角色。

[gpadmin@gpceshi1 ~]$ gprecoverseg -r

精神病院里病最重的人
关注
专栏目录
Greenplum【问题 02】报错 Value can not be converted to requested type 问题重现与解决
Java与大数据相关实践内容分享！
08-20 1228
Greenplum【问题 02】报错 Value can not be converted to requested type 问题重现与解决
k8s节点状态异常思路
砚墨
11-14 3862
要解决和了解节点状态为何会发生异常需要先了解k8s体系组件的基本知识与原理 在k8s容器集群运行过程，时长遇到节点运行状态异常的问题和因为组件异常、系统内核死锁、资源不足等原因引起节点状态不可知。 该问题可能的原因有： 1.节点停机 2.节点组件kubelet异常 3.节点docker异常 4.节点的systemd的版本过低触发pleg的bug (低版本的systemd (67版本之前)，dbus的cookie溢出，导致docker、kubelet组件无法正常运行，包括runc 夯死等 5.网络有拦截 6.
Greenplum节点恢复
Sunhighlight的博客
02-23 2179
1.查看状态 gpadmin账户下执行：gpstate -a 2.排除故障后，恢复数据 gpadmin账户下执行：gprecoverseg 3.观察恢复是否完成 gpadmin账户下执行：gpstate -s | grep Sync 4.平衡处理节点（如果主节点down了，mirror节点接管后，会造成部分节点负担过重。所以要进行这步操作） gpadmin账户下执行：gprecoverseg -r...
greenplum集群节点主机宕机恢复异常persistent serial number 28603383, TID (20,45))“,,0,,“xact.c“,1780,“Stack trace
Jun_ming的博客
10-13 779
背景：生产环境greenplum集群（greenplum 4.3.8）数据节点seg12主机上4个mirror及seg13主机上4个mirror实例（对应primary在seg12）发生异常（down），mirror实例宕机后短时间内seg12主机发生异常宕机（此时seg13上已经异常的4个实例对应4个primary主机宕机，即有4个实例对应主备均异常），集群无完整的数据副本已无法进行正常提供服务执行sql报错。此时集群8个mirror异常4个primary异常。 过程：紧急联系机房进行宕机主机恢复，主机
Greenplum中内存设置不合理导致的报错
ctd33591的博客
04-05 923
声明：文中观点为作者的个人观点、不代表官方、如需更多帮助，请联系Pivotal官方·转载必须注明出处 修改说明：由于之前的描述不尽详细，可能会给一些读者带来误解，特意编辑修改本文，...
Greenplum数据库故障分析——semop(id=2000421076,num=11) failed: invalid argument
肥叔菌的博客
06-25 680
业务安装greenplum数据库时，master节点频繁崩溃，同事排查日志发现如下报错： 看上面的报错顿时感觉不可思议，PMChildFlags array中没有空闲的槽位，报错代码位于AssignPostmasterChildSlot函数中，详细流程参见 PostgreSQL数据库PMsignal——后端进程\Postmaster信号通信。连代码这行报错都说了。PMChildFlags槽从PMSignalShmemSize函数中可以看出其数量是远远大于MaxConnections，也就是业务连接在达到PM
数据库之路——greenplum数据库学习笔记
scorpio_cheetah的博客
12-06 5279
一、常用指令： 1.取端口号：select 　* from gp_segment_configuration  2.select * from pg_stat_activity  该表能查看到当前数据库连接的IP 地址，用户名，提交的查询等。 3.select pg_size_pretty(pg_relation_size('schema.tablename'));查看数据库占用空间 4.
greenplum学习笔记
07-10
- **Greenplum体系架构**：Greenplum由多个组件构成，包括一个Master节点、多个Segment节点以及一个Gang调度器。Master负责元数据管理、查询解析和计划生成，Segment节点执行实际的数据存储和计算任务。Gang调度器...
Greenplum入门——概览
在咖啡里溺水的鱼
10-08 2443
本文内容为博主阅读《Greenplum企业应用实战》的读书笔记，对书中主要知识点进行了归纳和梳理。有兴趣的同学可以买一本原书读一读。如果认为文中内容涉嫌侵权，请及时联系博主删除文章。OLTP 与 OLAP数据库系统分为两种。 - OLTP 面向前台应用，重吞吐和高并发 - OLAP 对大数据集进行统计分析，重计算Greenplum属于OLAPOLTPOLTP 联机事务处理 On-Line Tra
greenplum麒麟安装笔记
luozhenjie123的博客
01-14 2430
本周尝试在中标麒麟操作系统下安装greenplum。中标麒麟操作系统采用强化的Linux内核，我们首先准备好三台已安装中标麒麟服务版系统的虚拟机。规划他们的IP地址分别为： Master：10.81.2.20 Segment1：10.81.2.21 Segment2：10.81.2.22 通过查找greenplum的官方网站可知，greenplum支持的操作系统如下： Red Hat Enterprise Linux 64-bit 7.x (See the following Note.) Re
#greenplum非正常关闭启动报错解决# pre-existing shared memory block
qq_41341328的博客
06-02 3224
解决步骤：一、master启动Failed，根据报错提示，查看gp启动日志gp日志路径： master节点路径/pg_log/startup.log发现报错：pre-existing shared memory block (key 5432001, ID 524294) is still in use,,"Terminate any old server processes associated with data directory ""/mnt/lv1/gpadmin/data/master/gpse
故障分析 | Greenplum 数据状态异常处理
ActionTech的博客
12-06 670
客户在巡检时，发现 Greenplum 虽然正常运行，但有些数据的状态异常。我们知道 Greenplum 的数据是存在主段和镜像段上的，当 primary 数据异常，会自动的启用 mirror 数据。当然为了保证数据的高可用，还是要及时修复异常数据。 可以看到42个数据节点中有11个数据节点处于 down 状态；分别去down掉的节点中去查看数据文件（此处我们只取一个节点进行展示对比）： 可以发现都缺少了 postmaster.pid 文件。为了看的更清楚，我们找一个状态正常的节点查看对比： 说明：很多人说
Greenplum错误信息日志查询
qq_40028680的博客
08-22 3603
[Greenplum错误信息日志查询] 关于错误信息的查询与解决。 最近工作经常遇到导入信息失败或者是导入后少了。 如图采集日志显示这个报表有778条错误信息。 初期猜测是oracle库采集到 greenplum库数据字段类型不正确导致的 连接上服务器,进行日志导出操作步骤如下。 直接到4695（运行编号为该日志存放处） linux命令：cd /4694 linux命令：** vi 表名....
Greenplum【问题 03】6.13.0单机版重启实录（5次报错问题及解决的避坑指南+日志文件查看方法）
Java与大数据相关实践内容分享！
09-01 2642
Greenplum【问题记录 03】6.13.0单机版重启实录（5次报错问题及解决的避坑指南+日志文件查看方法）
datanode启动后闪退_解决了一个Greenplum启动失败的问题
weixin_39524741的博客
11-11 270
今天有个其他项目的同事求助，说是他们项目的Greenplum启动不了，让我远程帮忙看看。由于前一阵子我自己也遇到过启动失败的问题并解决了，因此就答应了下来。 首先连上VPN，登录服务器，切换到gpadmin用户，通过.bash_profile文件找到greenplum的安装目录和master文件路径。然后开始检查日志，查看$MASTER_DATA_DIRECTO...
mongodb 查询效率_MongoDB 存储和优化系列三
weixin_39687542的博客
11-21 408
上篇文章我们介绍了索引的基本概念，描述了不同类型索引的区别，工欲善其事，必先利其器，这篇文章，我们将展开介绍 explain 这个执行计划函数，进一步的了解Mongo的查询计划，来分析和诊断，提高查询的效率。explain()是MongoDB的一个重要的查询诊断工具，这个函数能够提供大量与查询相关的信息，该函数会返回查询计划、执行状态、服务器信息，根据这些信息可以有针对性的对性能进行优化...
Greenplum Segment节点掉线恢复介绍
weixin_43451783的博客
05-18 956
1. 背景 Greenplum版本：6.13.0 问题： Segment节点异常关机，恢复Segment节点并恢复Mirror节点状态。 如图所示：sdw1节点掉线。 2. 解决方法： 2.1 查看Mirror节点状态 查看错误Segment状态 处理过程： 1. 执行命令，会在当前目录生成一个recov文件，里面包含了要恢复的节点信息 gprecoverseg -o ./recov gprecoverseg -i recov ...
【分享】关闭科学上网后网络连接故障
清风唱诗人的博客
07-20 8445
科学上网是开发者或者科学爱好者绕不开的话题，倒不是崇洋媚外，只是在搜索结果上，熊厂还是有待进步的。 问题: 关闭科学上网工具后，无法上网。 原因: 原因有很多种，多半是在未正常关闭连接的情况下直接关闭电脑了。导致还是尝试使用之前的规则访问。 解决方案。 打开网络和Intenet设置，找到代理 然后对应下图操作，主要确保自动检测配置开启，然后将使用代理服务器关闭。即可 ...
greenplum utility方式连接到segment节点
最新发布
06-08
要使用Greenplum Utility工具连接到Greenplum的Segment节点，可以使用gpssh-exkeys和psql工具。以下是连接到Greenplum Segment节点的步骤： 1. 使用gpssh-exkeys工具将主节点的SSH密钥复制到所有的Segment节点上。在主节点上，使用以下命令： ``` gpssh-exkeys -f <hostfile> ``` 其中，<hostfile>是一个文本文件，包含所有Segment节点的IP地址或主机名。gpssh-exkeys将在所有节点上复制主节点的SSH密钥。 2. 在主节点上，使用psql命令连接到Greenplum数据库。例如，连接到数据库mydb： ``` psql -d mydb ``` 3. 在psql命令行中，使用\dn命令查看Greenplum数据库的模式列表。在Greenplum中，每个Segment节点都有一个单独的模式。找到要连接的Segment节点所在的模式。 4. 在psql命令行中，使用以下命令切换到要连接的Segment节点的模式： ``` SET search_path TO <segment_schema>; ``` 其中，<segment_schema>是要连接的Segment节点的模式名称。 5. 通过执行SQL查询来操作Segment节点上的数据。 请注意，连接到Greenplum Segment节点需要在主节点上安装gpssh-exkeys和psql工具，并且需要在主节点上设置SSH密钥认证。另外，为了在Segment节点上执行SQL查询，需要在Segment节点上安装PostgreSQL客户端工具。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值