mysql java多线程并发插入数据_mysql函数大批量插入数据+java多线程并发案例

当前需要做个测试,mysql数据库需要5000万数据来完成性能测试,于是我们写了个函数来完成这个功能。

函数定义如下:

#批量插入数据库的函数

BEGIN

#定义需要插入数据库表中的字段;

DECLARE id BIGINT(20);

DECLARE phone_number varchar(11);

#定义变量控制插入数据库表的行数

DECLARE sid bigint(20) DEFAULT 1;

DECLARE count bigint(20);

declare total bigint(20) DEFAULT 50000000;

#开启循环判断

while sid < total do

SET count = sid + 100000; //每次插入数据库条数,防止条数太多提交失败;

#开始事务

start transaction;

WHILE (sid < count) DO //循环插入数据库数据

SET id = sid;

SET phone_number = CONCAT(1, ROUND(ROUND(RAND(),10)*10000000000));

INSERT INTO t_contact_phone(sid,phone_number)

VALUES(id,phone_number);

#累计行数

SET sid = sid+1;

END WHILE;

commit;  //提交事务

end while; //结束循环

END

执行上述函数即可创建5000万条数据在测试库用于测试。

当我们需要同时执行大批量操作,那如果依然顺序单线程执行,会比较耗时,为了提高效率,我们需要通过多线程异步方式来提高效率;

比方说大批量数据的同步方案,只能通过批量查询+多线程+异步的方式来完成。才能更短的时间内更高效的完成任务。

public classSynchronizationData {

private static finalLogger logger= LoggerFactory.getLogger(SynchronizationData.class);

@AutowiredprivateApplicationSumaryMapper applicationSumaryMapper;//需要同步的数据表(mybatis完成)

@AutowiredprivateContactPhoneMapper contactPhoneMapper;//需要插入的数据表一(mybatis完成)

@Au

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值