MySQL用自增主键和随机变量做主键插入性能实测，与理论完全相反，求解答！

最新推荐文章于 2024-07-28 02:47:35 发布
最新推荐文章于 2024-07-28 02:47:35 发布
阅读量802 收藏
点赞数
文章标签： flask MySQL优化 MySQL实验
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43079236/article/details/96170275
版权
在Python 3.5、Flask 1.1.1、Flask-SQLAlchemy 2.4.0和MySQL 5.7.17环境下，进行了一项性能测试。测试比较了使用自增主键（带索引和不带索引）与使用预设随机数作为主键的MySQL插入速度。结果显示，三者在插入100万条数据时，平均插入时间差异不大，自增主键带索引和不带索引的平均时间均为2.0秒，而随机数主键的平均时间为0.89秒。测试表明实际性能与预期相反，未出现明显的性能差距。
摘要由CSDN通过智能技术生成

 先报测试环境：

  • python         3.5
  • Flask           1.1.1
  • Flask-SQLAlchemy 2.4.0
  • MySQL       5.7.17
  • Linux          Ubuntu 16.04.6 LTS

测试方法概述

通过flask创建了三个models类

分别是主键为我给定的随机数的model，自增主键的model（创建了btree索引），自增主键的model（未创建了btree索引）

分别命名为pri，tree，simple

然后用Flask-SQLAlchemy做插入操作，用Python的time.process_time()统计插入的时间。我每次插入1000条数据，每满10000条数据就测一次速，一共插入100万条数据。

测试结果

三个表的插入速度都没有随表的增长而产生很大的变化，因此直接给出平均数

pri表（给定的随机数做为主键）：0.89

tree表（自增主键，且btree有索引）：2.0

simple表（自增主键，且没有索引）：2.0

测试结果截图

代码详情

app.py


                

        

        

    

  


        

            

                    
                      最低0.47元/天 解锁文章
                        
                    
            

        

    

      

        

            

              
                
                  浪狼郎
                
              
            

            

                关注
              
            

        

        

          
      

      









                



	

		

			

				
					
mySql笔记之基础篇（参看尚硅谷视频）

				
			

			

				

					楠小弟的博客
				

				

					02-16
					
					976
					
				

			

		

		

			
				
mysql 基础篇、约束、存储过程、游标、触发器

			
		

	



                

              
                



	

		

			

				
					
数据库自增主键可能产生的问题

				
			

			

				

					weixin_33816946的博客
				

				

					04-14
					
					321
					
				

			

		

		

			
				
在MySQL中经常会配置自增长属性的字段作为主键，特别是使用InnoDB存储引擎，
因为InnoDB的聚集索引的特性，使用自增长属性的字段当主键性能更好，但是使用自增主键也可能会带来一些问题。举个例子，使用自增主键对数据库做分库分表，可能出现一些诸如主键重复等的问题，或者在数据库导入的时候，可能会因为主键出现一些问题。
主要业务表的主键应该配置一个合理的策略，尽量避免自增AUTO_INCREM...

			
		

	



                


  
              

                


	

		

			

				
					
mysql 自增id主键 和 随机字符串主键 插入性能比较

				
			

			

				

					stevewong的专栏
				

				

					04-14
					
					4652
					
				

			

		

		

			
				
理论上，自增id作为主键的数据，由于不需要频繁的节点分裂（页分裂），其性能要比随机字符串作为主键性能要好。下面通过实验看一下对比
自增id的数据表：
CREATE TABLE IF NOT EXISTS `auto_inc_pk`(
   `id` BIGINT UNSIGNED AUTO_INCREMENT,
   `name` VARCHAR(100) NOT NULL,
   PRIMARY...

			
		

	





	

		

			

				
					
mysql 随机生成40长度的主键

					
最新发布

				
			

			

				

					weixin_28865303的博客
				

				

					07-28
					
					40
					
				

			

		

		

			
				
MySQL 随机生成40长度的主键：技术解析与应用案例
在数据库设计中，主键（Primary Key）是表中唯一标识每行记录的字段。一个良好的主键设计可以提高数据检索效率，增强数据安全性。本文将探讨如何在MySQL数据库中生成40位长度的随机主键，并提供实际代码示例。
随机主键的生成原理
随机主键通常由随机字符和数字组成，...

			
		

	



		

			
		



	

		

			

				
					
主键乱序插入对Innodb性能的影响

				
			

			

				

					weixin_30284355的博客
				

				

					06-29
					
					142
					
				

			

		

		

			
				
在平时的mysql文档学习中我们经常会看到这么一句话：
MySQL tries to leave space so that future inserts do not incur un-necessary page splits (and thus higher IO cost). In an "ideal" world, MySQL tries to keep the index pag...

			
		

	





	

		

			

				
					
MySQL自增锁引起的插入性能问题

				
			

			

				

					java开发学习积累
				

				

					03-13
					
					2504
					
				

			

		

		

			
				
1 问题背景

学习《深入理解 MySQL ——锁、事务与并发控制》（https://mp.weixin.qq.com/s/JFSDqI5yaOc-Znr6Q1ohVA）的过程中了解到，自增锁（autoinc_lock）会影响事务插入的性能问题：

AUTO-INC 锁是一种特殊的表级锁，产生于这样的场景：事务插入(inserting into )到具有 AUTO_INCREMENT 列的表中。
...

			
		

	





	

		

			

				
					
mysql 自增id和UUID做主键性能分析，及最优方案

				
			

			

				

					weixin_33962923的博客
				

				

					04-17
					
					390
					
				

			

		

		

			
				
2019独角兽企业重金招聘Python工程师标准>>>   
                                        
         ...

			
		

	





	

		

			

				
					
MySQL实战45讲学习笔记

				
			

			

				

					baidu_26296695的博客
				

				

					09-30
					
					1766
					
				

			

		

		

			
				
文章目录MySQL实战45讲-学习笔记01 基础架构：一条SQL查询语句是如何执行的？mysql逻辑架构连接器查询缓存分析器优化器执行器02 日志系统：一条SQL更新语句如何执行redo logbinlog执行器和InnoDB引擎在执行update语句时的内部流程两阶段提交一周一备vs一天一备03 事务隔离隔离级别事务的启动方式04 深入浅出索引（上）常见的索引模型（数据结构）哈希表有序数组搜索树InnoDB的索引模型B+树索引的维护哪些场景用自增主键05 深入浅出索引（下）覆盖索引联合索引的字段顺序索引下

			
		

	





	

		

			

				
					
（收藏）MySQL从入门到进阶这一篇就够了

				
			

			

				

					weixin_42208959的博客
				

				

					08-10
					
					4380
					
				

			

		

		

			
				
https://blog.csdn.net/qq_38490457/article/details/107640904?utm_source=app



			
		

	





	

		

			

				
					
不要再问我 in，exists 走不走索引了

				
			

			

				

					JavaShark的博客
				

				

					06-07
					
					620
					
				

			

		

		

			
				
最近，有一个业务需求，给我一份数据 A ，把它在数据库 B 中存在，而又比 A 多出的部分算出来。由于数据比较杂乱，我这里简化模型。然后就会发现，我去，这不就是 not in ，not exists 嘛。那么问题来了，in, not in , exists , not exists 它们有什么区别，效率如何？曾经从网上听说，in 和 exists 不会走索引，那么事实真的是这样吗？带着疑问，我们研究下去。注意：在说这个问题时，不说明 MySQL 版本的都是耍流氓，我这里用的是 5.7.18 。为了方便，我们

			
		

	





	

		

			

				
					
Mysql自增id、uuid、雪花算法id的比较

				
			

			

				

					一生编程，快乐编程
				

				

					05-24
					
					711
					
				

			

		

		

			
				
雪花算法生成的 id，包括 符号位（1位），时间戳( 41位) ，数据中心ID (5位)， 机器ID(5位)， 序列号(12位)。序列号 (12位) ：对于某个机器/进程， 每生成 一个ID，序列号就加1，这个数字每毫秒开始时都会被重置 为0。雪花id 的生成依赖于机器的时钟，如果时钟回拨或者时钟不同步，可能会导致生成的id不唯一。雪花id 占用的存储空间较大，通常为64位，如果作为主键，会占用更多的存储空间。雪花算法，可以生成唯一id，id 只包含数字， 长 64位。1.不适用于分布式系统。

			
		

	





	

		

			

				
					
mysql 写有多快_MySQL每秒57万的写入，快还是慢？

				
			

			

				

					weixin_39952502的博客
				

				

					01-27
					
					899
					
				

			

		

		

			
				
项目地址： https://github.com/XeLabs/tokudb相对官方TokuDB的优化：内置了jemalloc 内存分配；引入更多的内置的TokuDB性能指标；支持Xtrabackup备份；引入ZSTD压缩算法；支持TokuDB的binlog_group_commit特性；四、测试表TokuDB核心配置：表结构：利用load data写入数据：计算一下每秒写入速度：文件大小：实际文...

			
		

	





	

		

			

				
					
MySQL 使用自增ID主键和UUID 作为主键的优劣比较详细过程（从百万到千万表记录测试）...

				
			

			

				

					weixin_34378767的博客
				

				

					10-24
					
					578
					
				

			

		

		

			
				
测试缘由
 一个开发同事做了一个框架，里面主键是uuid，我跟他建议说mysql不要用uuid用自增主键，自增主键效率高，他说不一定高，我说innodb的索引特性导致了自增id做主键是效率最好的，为了拿实际的案例来说服他，所以准备做一个详细的测试。
 作为互联网公司，一定有用户表，而且用户表UC_USER基本会有百万记录，所以在这个表基础上准测试数据来进行测试。
          测试过程是目前...

			
		

	





	

		

			

				
					
MySQL自增主键详解

					
热门推荐

				
			

			

				

					hxt的博客
				

				

					06-02
					
					20万+
					
				

			

		

		

			
				
一、自增值保存在哪儿？
不同的引擎对于自增值的保存策略不同
1.MyISAM引擎的自增值保存在数据文件中
2.InnoDB引擎的自增值，在MySQL5.7及之前的版本，自增值保存在内存里，并没有持久化。每次重启后，第一次打开表的时候，都会去找自增值的最大值max(id)，然后将max(id)+步长作为这个表当前的自增值
select max(ai_col) from table_name for ...

			
		

	





	

		

			

				
					
MySQL添加数据时生成很长串的随机数主键id

				
			

			

				

					Abdullahi_kanye的博客
				

				

					05-08
					
					8695
					
				

			

		

		

			
				
前言
主要使用到的技术：springboot、mybatisPlus、mybatisPlus的代码生成…
要进行的操作：通过mybatisPlus代码生成器生成代码，然后再向数据库增加数据

一、遇到的问题

可以向数据库中增加数据，但是主键id是一个长串的随机数。


二、问题分析
新创建一个数据库表，然后手动在数据库表中添加数据时，字段的id值是正常的。但是只要一经过mybatisPlus操...

			
		

	





	

		

			

				
					
设置自增主键从某一数字开始_行式填报之主键设置

				
			

			

				

					weixin_36257554的博客
				

				

					01-25
					
					736
					
				

			

		

		

			
				
填报功能是报表工具不可或缺的功能之一，此功能可以让用户在页面中进行数据维护操作。特别是在行式填报中，用户不仅可以修改数据，而且可以插入 / 添加新数据或删除已有数据。这样，在更新行式填报页面中的数据记录时，主键字段就会涉及 insert 和 delete 操作，而对于不同类型的主键我们应该如何进行更新设置？有哪些方面是需要我们注意的呢？下面我们将以雇员信息表的维护为例探讨一下主键设置的相关内容。 ...

			
		

	





	

		

			

				
					
数据库自增主键可能的问题

				
			

			

				

					riemann_的博客
				

				

					06-30
					
					7110
					
				

			

		

		

			
				
单表的情况下数据库自增id并没有什么问题，在一张表分布到多个数据库的情况下，使用表自增将会出现id重复的问题。
解决的办法有两个方向，一个是在应用层做处理，一个是数据库上去做处理。
目前生成主键方法主要有以下几种：
1、采用mysql自增长主键策略
优点：简单，不需要程序特别处理
缺点：这种方法对以后如果项目移植到其它数据库上改动会比较大，oracle、    db2采用Sequence，mysq...

			
		

	





	

		

			

				
					
MySQL添加数据时生成长串随机主键id

				
			

			

				

					qq_40713201的博客
				

				

					08-19
					
					2262
					
				

			

		

		

			
				
第二行开始通过页面添加数据，依次为2、3…但是显示在数据库中为一长串随机数。这时我们再添加数据，会发现这串长数据不再是随即状态，而是每次自增1。这时到IDE中修改代码，把圈起来的自增语句注释掉。这是自动生成的代码，红框的语句即表示自增。第一行数据为手动数据库添加，为1，正常。首先到数据库中，设置主键自增。重启后端，回到页面中新增数据。这时数据就是用户添加的数据了。

			
		

	





	

		

			

				
					
mysql自增主键插入

				
			

			

				

					07-28
				

			

		

		

			
				
要在 MySQL 中插入自增主键，可以按照以下步骤进行操作：  1. 创建一个表，其中包含自增主键列。可以使用 `AUTO_INCREMENT` 关键字来定义该列。例如，创建一个名为 `users` 的表，并在 `id` 列上设置自增主键：  ```...

			
		

	



              




          




        



    





    



      

      

        
      

      





	

		评论	
	

	
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值