mysql 创建几千张表_MySQL 快速创建千万级测试数据

备注： 此文章的数据量在100W，如果想要千万级，调大数量即可,但是不要大量使用rand() 或者uuid() 会导致性能下降

背景

在进行查询操作的性能测试或者sql优化时，我们经常需要在线下环境构建大量的基础数据供我们测试，模拟线上的真实环境。

废话，总不能让我去线上去测试吧，会被DBA砍死的

创建测试数据的方式

1. 编写代码，通过代码批量插库(本人使用过，步骤太繁琐，性能不高，不推荐)

2. 编写存储过程和函数执行(本文实现方式1)

3. 临时数据表方式执行 (本文实现方式2，强烈推荐该方式，非常简单，数据插入快速，100W，只需几秒)

4. 一行一行手动插入，(WTF，去死吧)

复制代码

创建基础表结构

不管用何种方式，我要插在那张表总要创建的吧

CREATE TABLE `t_user` (

`id` int(11) NOT NULL AUTO_INCREMENT,

`c_user_id` varchar(36) NOT NULL DEFAULT '',

`c_name` varchar(22) NOT NULL DEFAULT '',

`c_province_id` int(11) NOT NULL,

`c_city_id` int(11) NOT NULL,

`create_time` datetime NOT NULL,

PRIMARY KEY (`id`),

KEY `idx_user_id` (`c_user_id`)

) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4;

复制代码

方式1： 采用存储过程和内存表

创建内存表

利用 MySQL 内存表插入速度快的特点，我们先利用函数和存储过程在内存表中生成数据，然后再从内存表插入普通表中

CREATE TABLE `t_user_memory` (

`id` int(11) NOT NULL AUTO_INCREMENT,

`c_user_id` varchar(36) NOT NULL DEFAULT '',

`c_name` varchar(22) NOT NULL DEFAULT '',

`c_province_id` int(11) NOT NULL,

`c_city_id` int(11) NOT NULL,

`create_time` datetime NOT NULL,

PRIMARY KEY (`id`),

KEY `idx_user_id` (`c_user_id`)

) ENGINE=MEMORY DEFAULT CHARSET=utf8mb4;

复制代码

创建函数和存储过程

# 创建随机字符串和随机时间的函数

mysql> delimiter $$

mysql> CREATE DEFINER=`root`@`%`