MySQL + PostgreSQL批量插入更新insertOrUpdate

PostgreSQL标榜自己是世界上最先进的开源数据库。PostgreSQL的一些粉丝说它能与Oracle相媲美,而且没有那么昂贵的价格和傲慢的客服。最初是1985年在加利福尼亚大学伯克利分校开发的,作为Ingres数据库的后继。PostgreSQL是完全由社区驱动的开源项目。它提供了单个完整功能的版本,而不像MySQL那样提供了多个不同的社区版、商业版与企业版。PostgreSQL基于自由的BSD/MIT许可,组织可以使用、复制、修改和重新分发代码,只需要提供一个版权声明即可。

3、PostgreSQL相对于MySQL的优势

(1)不仅仅是关系型数据库,还可以存储:

  • array,不管是一位数组还是多为数组均支持

  • json(hStore)和jsonb,相比使用text存储接送要高效很多

(2)支持地理信息处理扩展

(3)可以快速构建REST API

(4)支持R-trees这样可扩展的索引类型,可以更方便地处理一些特殊数据。MySQL 处理树状的设计会很复杂, 而且需要写很多代码, 而 PostgreSQL 可以高效处理树结构。

(5)更好的外部数据源支持

(6)字符串没有长度限制

等等…

二、postgres中insertOrUpdate代码实例


1、创建user表

CREATE TABLE public.t_user (

username varchar(100) NOT NULL,

age int4 NOT NULL DEFAULT 0,

“password” varchar(100) NULL,

deleted int4 NULL,

created_time timestamp NULL

);

CREATE UNIQUE INDEX t_user_union_name_age_password ON public.t_user USING btree (username, password, age);

2、简单的方式实现

insert

into

public.t_user (username , password,age,created_time)

values (‘zs’, ‘123’, 18,now()), (‘ls’, ‘123456’, 19,now()),(‘ww’, ‘123’, 20,now())

on conflict (username, age,password) do update set username = excluded.username,age = excluded.age,password = excluded.password,created_time = excluded.created_time

3、利用unnest函数实现

insert

into

public.t_user (username , password,age,created_time)

values (unnest(array[‘zs’, ‘ls’, ‘ww’]), unnest(array[‘123’, ‘123’, ‘123456’]),unnest(array[18, 19, 20]), unnest(array[now(), now(), now()]))

on conflict (username, age,password) do update set username = excluded.username,age = excluded.age,password = excluded.password,created_time = excluded.created_time

4、如果数据已存在,就就什么也不做

insert

into

public.t_user (username , password,age,created_time)

values (‘zs’, ‘123’, 18,now()), (‘ls’, ‘123456’, 19,now()),(‘ww’, ‘123’, 20,now())

on conflict (username, age,password) do nothing

三、相关重点函数简介


1、unnest(anyarray)

unnest函数将输入的数组转换成一个表,这个表的每一列都代表相应的一个数组中的元素。

如果unnest与其他字段一起出现在select中,就相当于其他字段进行了一次join。

主要用于完成行转列的场景。

select ‘张三’ as name, unnest(Array[‘语文’,‘数学’,‘英语’]) as course;

name | course

------±-------

张三 | 语文

张三 | 数学

张三 | 英语

(3 rows)

**INSERT ON CONFLICT**实现PostgreSQL插入更新特性。

EXCLUDED虚拟表,其包含我们要更新的记录

四、userMapper.xml写法


<?xml version="1.0" encoding="UTF-8" ?>

INSERT INTO m a p . t a b l e I n f o . s c h e m a N a m e . {map.tableInfo.schemaName}. map.tableInfo.schemaName.{map.tableInfo.tableName}

(

“table_id”,

“file_name”,

“create_time”,

<foreach collection=“map.list.get(0)” index=“key” item=“value”

separator=“,”>

“${key}”

)

VALUES

(

${map.tableInfo.tableId},

#{map.tableInfo.fileName},

now(),

<foreach collection=“list” index=“key” item=“value”

separator=“,”>

#{value}

TO_TIMESTAMP(#{value},‘yyyy-MM-dd hh24:mi:ss’)

${value}

)

on conflict (

file_name, table_id

, “id_number”

) do update

set

“table_id” = excluded.“table_id”,

“file_name” = excluded.“file_name”,

“create_time” = excluded.“create_time”,

k e y " = e x c l u d e d . " {key}" = excluded." key"=excluded."{key}”

五、MySQL中insertOrUpdate代码实例


1、建表语句

CREATE TABLE t_user (

username varchar(255) CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL,

password varchar(255) CHARACTER SET utf8 COLLATE utf8_general_ci NOT NULL,

age int(0) NULL DEFAULT NULL,

address varchar(255) CHARACTER SET utf8 COLLATE utf8_general_ci NULL DEFAULT NULL,

create_time datetime(0) NULL DEFAULT NULL,

update_time datetime(0) NULL DEFAULT NULL,

version int(0) NOT NULL,

UNIQUE INDEX user_union_index(username, password, age) USING BTREE

) ENGINE = InnoDB CHARACTER SET = utf8 COLLATE = utf8_general_ci ROW_FORMAT = Dynamic;

最后

自我介绍一下,小编13年上海交大毕业,曾经在小公司待过,也去过华为、OPPO等大厂,18年进入阿里一直到现在。

深知大多数Java工程师,想要提升技能,往往是自己摸索成长,自己不成体系的自学效果低效漫长且无助。

因此收集整理了一份《2024年Java开发全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友,同时减轻大家的负担。

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上Java开发知识点,不论你是刚入门Java开发的新手,还是希望在技术上不断提升的资深开发者,这些资料都将为你打开新的学习之门!

如果你觉得这些内容对你有帮助,需要这份全套学习资料的朋友可以戳我获取!!

由于文件比较大,这里只是将部分目录截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且会持续更新!
929)]

[外链图片转存中…(img-nCkV63fe-1715842765930)]

[外链图片转存中…(img-S9tyEXEE-1715842765930)]

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上Java开发知识点,不论你是刚入门Java开发的新手,还是希望在技术上不断提升的资深开发者,这些资料都将为你打开新的学习之门!

如果你觉得这些内容对你有帮助,需要这份全套学习资料的朋友可以戳我获取!!

由于文件比较大,这里只是将部分目录截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且会持续更新!

  • 4
    点赞
  • 10
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
PostgreSQL是一种开源的关系性数据库管理系统,支持大量的数据类型和高级功能。而MyBatis是一个优秀的基于Java的持久层框架,可以将应用程序中的Java对象映射到关系数据库中。 在使用MyBatis进行 PostgreSQL 批量插入时,可以使用批处理技术来提高插入效率。具体做法是首先使用 MyBatis 的批量插入功能进行插入数据,然后再调用 PostgreSQL 中的 COPY 命令将数据批量导入数据库。 首先,在MyBatis的 Mapper.xml 文件中,我们需要定义批量插入SQL 语句。SQL 语句中使用foreach标签来循环插入所有数据行。具体参数可以根据需要进行调整,样例如下: ``` <insert id="batchInsert"> INSERT INTO table_name (column1, column2, ...) VALUES <foreach collection="list" item="item" separator=","> (#{item.column1}, #{item.column2}, ...) </foreach> </insert> ``` 然后,在 Java 代码中调用批量插入功能。具体代码如下: ``` SqlSession sqlSession = sqlSessionFactory.openSession(ExecutorType.BATCH, false); try { Mapper mapper = sqlSession.getMapper(Mapper.class); for (Data data : dataList) { mapper.insert(data); } sqlSession.commit(); } finally { sqlSession.close(); } ``` 最后使用 COPY 命令进行批量导入数据。指定文件路径和分隔符,将数据文件中的内容导入到数据库中。具体代码如下: ``` COPY table_name FROM '/path/to/data.csv' WITH (FORMAT csv, DELIMITER ',', HEADER false); ``` 通过这种方式,可以有效地实现 PostgreSQL 批量插入 MyBatis 数据。同时也可以提高数据处理效率,降低系统负担。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值