pgsql实现对大数据多字段表格的异同点判断

使用PL/pgSQL函数,对比两个同结构且含有44万多条数据、190个字段的大表格,找出不一致的记录并存储到结果表中。运行时间为2分钟30秒。
摘要由CSDN通过智能技术生成

为处理大数据量的表格,识别不同时间段对表格实现的更改,先将两张同结构表的不同数据记录提取出来,存为单独的结果表,方便后续的区别到底来自于那个字段的识别。

create or replace function get_tables_differences
(in schema_n_1 text,in schema_n_2 text,in table_n_1 text,in table_n_2 text)
returns void
language plpgsql
as $$
begin
drop table if exists temp_table_1;
drop table if exists temp_table_2;
drop table if exists result_table_get_tables_differences;
execute format('create table temp_table_1 as select * from %I.%I limit(0)',schema_n_1,table_n_1);
execute format('create table temp_table_2 as select * from %I.%I limit(0)',schema_n_2,table_n_2);
alter table temp_table_1 add column if not exists from_where text default 'first_table';
alter table temp_table_2 add column if not exists from_where text default 'second_table';
execute format('insert into temp_table_1 (select * from %I.%I except select * from %I.%I)',schema_n_1,table_n_1,schema_n_2,table_n_2
  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值