【gp数据库】历史SQL查询及gpfdist入库

最新推荐文章于 2024-01-23 15:13:50 发布

summer108

最新推荐文章于 2024-01-23 15:13:50 发布

阅读量3.7k

点赞数 2

分类专栏： Greenplum 文章标签： gpfdist

本文链接：https://blog.csdn.net/sinat_35630008/article/details/90667405

版权

Greenplum 专栏收录该内容

13 篇文章

订阅专栏

排查数据库故障或运行缓慢原因时，常翻看历史SQL文件。GREENPLUM主节点的特定目录保存大量记录操作日志的CSV文件，可通过GP自带的gpfdist将文件数据保存到数据表，gpfdist默认路径即日志文件所在路径。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

在排查数据库故障或者找出数据库运行缓慢，反应时间较长的原因时，经常会翻看历史SQL文件。

GREENPLUM在主节点的/data/master/gpseg-1/pg_log目录下保存了大量的CSV文件，记录了数据库的操作日志。

查看文件内容如下图

通过GP自带的gpfdist将文件数据保存到数据表中，gpfdist默认路径就是日志文件所在路径

在客户端执行

drop EXTERNAL TABLE  pg_sql;

-- 创建可读的外部表
CREATE READABLE EXTERNAL TABLE 
pg_sql(rec_time varchar,username varchar,databasename varchar,proc_id varchar,th_id varchar,from_id varchar,no1 varchar,ora_time varchar
,no2 varchar,no3 varchar,no4 varchar,master_id varchar,no5 varchar,no6 varchar,no7 varchar,no8 varchar,sql_type varchar,no9 varchar
,statement varchar,no10 varchar,no11 varchar,no12 varchar,no13 varchar,no14 varchar,sql_text varchar,no15 varchar,no16 varchar,no17 varchar
,no18 varchar,no19 varchar ) 
LOCATION ('gpfdist://192.168.***.**:8081/*.csv') 
FORMAT 'CSV' (DELIMITER AS ',') ENCODING 'utf-8';

-- 查询结果
select * from pg_sql ;

查询结果如下：