mysql添加大批量数据

1.创建存储过程函数

从上到下依次执行这些存储过程函数

#函数1:创建随机产生字符串函数
DELIMITER //
CREATE FUNCTION rand_string(n INT) 
				RETURNS VARCHAR(255) #该函数会返回一个字符串
BEGIN 
				DECLARE chars_str VARCHAR(100) DEFAULT 'abcdefghigklmnopqrstuvwxyzABCDEFGHIGKLMNOPQRSTUVWXYZ';
				DECLARE return_str VARCHAR(255) DEFAULT '';
				DECLARE i INT DEFAULT 0;
				WHILE i < n DO
			SET return_str = CONCAT(return_str,SUBSTRING(chars_str,FLOOR(1+RAND()*52),1));	
			SET i = i + 1;
		END WHILE;
		RETURN return_str;
END //
DELIMITER ;

如果添加第一个函数时报错,请看和下面单词是否相关,如果相关执行set开头的语句。

select @@log_bin_trust_function_creators;

set GLOBAL log_bin_trust_function_creators = 1;
#函数2:创建随机数的函数
DELIMITER //
CREATE FUNCTION random_num (from_num INT ,to_num INT) RETURNS INT(11)
BEGIN
DECLARE i INT DEFAULT 0;
SET i  = FLOOR(from_num+ RAND()* (to_num - from_num+1));
RETURN i;
END //
DELIMITER ;
#创建插入到课程表存储过程
DELIMITER //
CREATE PROCEDURE insert_course( max_num INT)
BEGIN
DECLARE i INT DEFAULT 0;
	SET autocommit = 0; # 设置手动提交事务
	REPEAT #循环
	SET i = i + 1; #赋值
	INSERT INTO course (course_id, course_name ) VALUES (random_num(10000, 10100), rand_string(6));
	UNTIL i = max_num
	END REPEAT;
	COMMIT; #提交事务
END //
DELIMITER ;
#创建插入到课程表存储过程
DELIMITER //
CREATE PROCEDURE insert_course( max_num INT)
BEGIN
DECLARE i INT DEFAULT 0;
	SET autocommit = 0; # 设置手动提交事务
	REPEAT #循环
	SET i = i + 1; #赋值
	INSERT INTO course (course_id, course_name ) VALUES (random_num(10000, 10100), rand_string(6));
	UNTIL i = max_num
	END REPEAT;
	COMMIT; #提交事务
END //
DELIMITER ;
#创建插入到学生表存储过程
DELIMITER //
CREATE PROCEDURE insert_stu( max_num INT)
BEGIN
DECLARE i INT DEFAULT 0;
	SET autocommit = 0; # 设置手动提交事务
	REPEAT #循环
	SET i = i + 1; #赋值
	INSERT INTO stu_info (course_id, class_id, student_id, NAME ) 
	VALUES (random_num(10000, 10100), random_num(10000, 10200), random_num(1, 200000), rand_string(6));
	UNTIL i = max_num
	END REPEAT;
	COMMIT; #提交事务
END //
DELIMITER ;

2.创建表

SET NAMES utf8mb4;
SET FOREIGN_KEY_CHECKS = 0;

-- ----------------------------
-- Table structure for stu_info
-- ----------------------------
DROP TABLE IF EXISTS `stu_info`;
CREATE TABLE `stu_info`  (
  `id` bigint(20) NOT NULL AUTO_INCREMENT,
  `course_id` int(11) NULL DEFAULT NULL,
  `class_id` int(11) NULL DEFAULT NULL,
  `student_id` int(11) NULL DEFAULT NULL,
  `NAME` varchar(255) CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci NULL DEFAULT NULL,
  PRIMARY KEY (`id`) USING BTREE
) ENGINE = InnoDB AUTO_INCREMENT = 1000001 CHARACTER SET = utf8mb4 COLLATE = utf8mb4_general_ci ROW_FORMAT = Dynamic;

SET FOREIGN_KEY_CHECKS = 1;
SET NAMES utf8mb4;
SET FOREIGN_KEY_CHECKS = 0;

-- ----------------------------
-- Table structure for course
-- ----------------------------
DROP TABLE IF EXISTS `course`;
CREATE TABLE `course`  (
  `id` bigint(20) NOT NULL AUTO_INCREMENT,
  `course_id` int(11) NULL DEFAULT NULL,
  `course_name` varchar(255) CHARACTER SET utf8mb4 COLLATE utf8mb4_general_ci NULL DEFAULT NULL,
  PRIMARY KEY (`id`) USING BTREE
) ENGINE = InnoDB AUTO_INCREMENT = 101 CHARACTER SET = utf8mb4 COLLATE = utf8mb4_general_ci ROW_FORMAT = Dynamic;

SET FOREIGN_KEY_CHECKS = 1;

3.执行添加数据的存储函数

添加100万条数据用时可能稍长,与电脑性能有关,本人电脑不到3分钟。

CALL insert_course(100);
CALL insert_stu(1000000);
  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
要在MySQL中新增大批量数据,可以通过以下几种方法来实现。 第一种方法是使用INSERT INTO语句。可以将需要插入的数据按照一定的格式(例如CSV格式)保存在一个文本文件中,然后使用LOAD DATA INFILE语句将文本文件中的数据直接导入到MySQL数据库中。这个方法的好处是可以快速插入大量数据,但需要事先将数据保存在文本文件中。 第二种方法是使用INSERT INTO语句的批量插入形式。可以将多个INSERT INTO语句合并为一个INSERT INTO语句,并使用VALUES子句一次性插入多条数据。这种方法比较适用于数据较小的情况,不需要保存为文本文件。 第三种方法是使用INSERT INTO SELECT语句。可以先创建一个临时表,将需要插入的数据保存到临时表中,然后使用INSERT INTO SELECT语句将临时表中的数据插入到目标表中。这种方法比较适用于需要对插入的数据进行一定的处理或筛选的情况。 无论使用哪种方法,对于大批量数据的插入,还可以考虑以下几点优化: 1. 在插入之前,将目标表的索引和约束暂时禁用,以提高插入的速度; 2. 设置合适的事务大小,将多个插入操作批量提交,减少事务的开销; 3. 根据数据的特点,合理选择合适的插入顺序,以提高插入的效率; 4. 使用多线程或并行插入提高并发处理能力。 总之,根据具体的需求和场景,可以选择合适的方法和优化策略来实现MySQL大批量数据插入。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值