MySQL Memory 存储引擎浅析

MEMORY支持AUTO_INCREMENT列

MEMORY表支持INSERT DELAYED

非临时的MEMORY表在所有客户端之间共享，就像其它任何非临时表。

**MEMORY表内容存储在内存中，它会作为动态查询队列创建内部临时表的共享介质，但是两个类型表的不同在于MEMORY表不会遇到存储转换，而内部表则会：

1、MEMORY表不会转换为磁盘表，而内部临时表如果太大会自动转换为磁盘表。

2、MEMORY表最大值受系统变量 max_heap_table_size 限制，默认为16MB，要改变MEMORY表大小限制，需要改变max_heap_table_size 的值。该值在 CREATE TABLE 时生效并伴随表的生命周期，(当你使用 ALTER TABLE 或 TRUNCATE TABLE命令时，表的最大限制将改变，或重启MYSQL服务时, 所有已存在的MEMORY表的最大限制将使用max_heap_table_size 的值重置。)**

服务器需要足够内存来维持所有在同一时间使用的MEMORY表。

如果删除行，内存表不会回收内存，只有整张表全部删除的时候，才进行内存回收。同时只有在同一张表中插入新行时才会使用之前删除行的内存空间。 要释放已删除行所占用的内存空间，可以使用ALTER TABLE ENGINE=MEMORY对表进行强制重建。当内容过期要释放整张内存表，可以执行DELETE 或 TRUNCATE TABLE清除所有行，或者使用DROP TABLE删除表。

当MySQL服务器启动时，如果你想填充MEMORY表，你可以使用–init-file选项。例如，你可以把INSERT INTO … SELECT 或LOAD DATA INFILE这样的语句放入这个文件中以便从持久稳固的的数据源装载表。

如果你正使用复制，当主服务器被关闭且重启动之时，主服务器的MEMORY表变空。可是从服务器意识不到这些表已经变空，所以如果你从它们选择数据，它就返回过时的内容。自从服务器启动后，当一个MEMORY表在主服务器上第一次被使用之时，一个DELETE FROM语句被自动写进主服务器的二进制日志，因此再次让从服务器与主服务器同步。注意，即使使用这个策略，在主服务器的重启和它第一次使用该表之间的间隔中，从服务器仍旧在表中有过时数据。可是，如果你使用–init-file选项于主服务器启动之时在其上推行MEMORY表。它确保这个时间间隔为零。

在MEMORY表中，一行需要的内存使用下列公式计算：

代码如下:

SUM_OVER_ALL_BTREE_KEYS(max_length_of_key + sizeof(char*) * 4)

+ SUM_OVER_ALL_HASH_KEYS(sizeof(char*) * 2)

+ ALIGN(length_of_row+1, sizeof(char*))

ALIGN()代表round-up因子，它使得行的长度为char指针大小的确切倍数。sizeof(char*)在32位机器上是4，在64位机器上是8。

如前所述，系统变量 max_heap_table_size 用于设置内存表的大小上限。要控制单个表的最大值，需要在创建表之前设置会话变量。(不要设置全局max_heap_table_size 的值，除非你打算所有客户端创建的内存表都使用这个值)

下面的例子创建了两张内存表，它们的大小限制分别为 1MB 和 2MB：

代码如下:

SET max_heap_table_size = 1024*1024;

/* Query OK, 0 rows affected (0.00 sec) */

CREATE TABLE t1 (id INT, UNIQUE(id)) ENGINE = MEMORY;

/* Query OK, 0 rows affected (0.01 sec) */

SET max_heap_table_size = 1024*1024*2;

/* Query OK, 0 rows affected (0.00 sec) */

CREATE TABLE t2 (id INT, UNIQUE(id)) ENGINE = MEMORY;

/* Query OK, 0 rows affected (0.00 sec) */

如果服务重启，两张表的大小限制会使用全局的max_heap_table_size值复原。

你也可以通过CREATE TABLE 的MAX_ROWS选项设置表的最大行数，但max_heap_table_size的优先级高于MAX_ROWS，当两者同时存在时为了最大兼容，你需要将max_heap_table_size设置一个合理值。

Memory存储引擎官方论坛： http://forums.mysql.com/list.php?92

性能测试

分别测试比较了MySQL的InnoDB、MyIsam、Memory三种引擎与.Net DataTable的Insert以及Select性能（柱状图体现了其消耗时间，单位百纳秒，innodb_flush_log_at_trx_commit参数配置为1，每次测试重启了MySQL以避免Query Cache），大至结果如下：

写入10000条记录比较：

读取1000条记录比较。

测试脚本：

代码如下:

/******************************************************

MYSQL STORAGE ENGINE TEST

http://wu-jian.cnblogs.com/

2011-11-29

******************************************************/

CREATE DATABASE IF NOT EXISTS test

CHARACTER SET ‘utf8’

COLLATE ‘utf8_general_ci’;

USE test;

/******************************************************

1.INNODB

******************************************************/

DROP TABLE IF EXISTS test_innodb;

CREATE TABLE IF NOT EXISTS test_innodb (

id INT UNSIGNED AUTO_INCREMENT COMMENT ‘PK’,

obj CHAR(255) NOT NULL DEFAULT ‘’ COMMENT ‘OBJECT’,

PRIMARY KEY (id)

) ENGINE=INNODB;

/******************************************************

2.MYISAM

******************************************************/

DROP TABLE IF EXISTS test_myisam;

CREATE TABLE IF NOT EXISTS test_myisam (

id INT UNSIGNED AUTO_INCREMENT COMMENT ‘PK’,

obj CHAR(255) NOT NULL DEFAULT ‘’ COMMENT ‘OBJECT’,

PRIMARY KEY (id)

) ENGINE=MYISAM;

/******************************************************

1.MEMORY

******************************************************/

DROP TABLE IF EXISTS test_memory;

CREATE TABLE IF NOT EXISTS test_memory (

id INT UNSIGNED AUTO_INCREMENT COMMENT ‘PK’,

obj CHAR(255) NOT NULL DEFAULT ‘’ COMMENT ‘OBJECT’,

PRIMARY KEY (id)

) ENGINE=MEMORY;

测试代码：

复制代码 代码如下:

using System;

using System.Data;

using MySql.Data.MySqlClient;

namespace MySqlEngineTest

{

class Program

{

const string OBJ = “The MEMORY storage engine creates tables with contents that are stored in memory. Formerly, these were known as HEAP tables. MEMORY is the preferred term, although HEAP remains supported for backward compatibility.”;

const string SQL_CONN = “Data Source=127.0.0.1;Port=3308;User ID=root;Password=root;DataBase=test;Allow Zero Datetime=true;Charset=utf8;pooling=true;”;

const int LOOP_TOTAL = 10000;

const int LOOP_BEGIN = 8000;

const int LOOP_END = 9000;

#region Database Functions

public static bool DB_InnoDBInsert(string obj)

{

string commandText = “INSERT INTO test_innodb (obj) VALUES (?obj)”;

MySqlParameter[] parameters = {

new MySqlParameter(“?obj”, MySqlDbType.VarChar, 255)

};

parameters[0].Value = obj;

if (DBUtility.MySqlHelper.ExecuteNonQuery(SQL_CONN, CommandType.Text, commandText, parameters) > 0)

return true;

else

return false;

}

public static string DB_InnoDBSelect(int id)

{

string commandText = “SELECT obj FROM test_innodb WHERE id = ?id”;

MySqlParameter[] parameters = {

new MySqlParameter(“?id”, MySqlDbType.Int32)

};

parameters[0].Value = id;

return DBUtility.MySqlHelper.ExecuteScalar(SQL_CONN, CommandType.Text, commandText, parameters).ToString();

}

public static bool DB_MyIsamInsert(string obj)

{

string commandText = “INSERT INTO test_myisam (obj) VALUES (?obj)”;

MySqlParameter[] parameters = {

new MySqlParameter(“?obj”, MySqlDbType.VarChar, 255)

};

parameters[0].Value = obj;

if (DBUtility.MySqlHelper.ExecuteNonQuery(SQL_CONN, CommandType.Text, commandText, parameters) > 0)

return true;

else

return false;

}

public static string DB_MyIsamSelect(int id)

{

string commandText = “SELECT obj FROM test_myisam WHERE id = ?id”;

MySqlParameter[] parameters = {

new MySqlParameter(“?id”, MySqlDbType.Int32)

};

parameters[0].Value = id;

return DBUtility.MySqlHelper.ExecuteScalar(SQL_CONN, CommandType.Text, commandText, parameters).ToString();

}

public static bool DB_MemoryInsert(string obj)

{

string commandText = “INSERT INTO test_memory (obj) VALUES (?obj)”;

MySqlParameter[] parameters = {

new MySqlParameter(“?obj”, MySqlDbType.VarChar, 255)

};

parameters[0].Value = obj;

if (DBUtility.MySqlHelper.ExecuteNonQuery(SQL_CONN, CommandType.Text, commandText, parameters) > 0)

return true;

else

return false;

}

public static string DB_MemorySelect(int id)

{

string commandText = “SELECT obj FROM test_memory WHERE id = ?id”;

MySqlParameter[] parameters = {

new MySqlParameter(“?id”, MySqlDbType.Int32)

};

parameters[0].Value = id;

return DBUtility.MySqlHelper.ExecuteScalar(SQL_CONN, CommandType.Text, commandText, parameters).ToString();

}

#endregion

#region Test Functions InnoDB

static void InnoDBInsert()

{

long begin = DateTime.Now.Ticks;

for (int i = 0; i < LOOP_TOTAL; i++)

{

DB_InnoDBInsert(OBJ);

}

Console.WriteLine(“InnoDB Insert Result: {0}”, DateTime.Now.Ticks - begin);

}

static void InnoDBSelect()

{

long begin = DateTime.Now.Ticks;

for (int i = LOOP_BEGIN; i < LOOP_END; i++)

{

DB_InnoDBSelect(i);

}

Console.WriteLine(“InnoDB SELECT Result: {0}”, DateTime.Now.Ticks - begin);

}

static void MyIsamInsert()

{

long begin = DateTime.Now.Ticks;

for (int i = 0; i < LOOP_TOTAL; i++)

{

DB_MyIsamInsert(OBJ);

}

Console.WriteLine(“MyIsam Insert Result: {0}”, DateTime.Now.Ticks - begin);

}

static void MyIsamSelect()

{

long begin = DateTime.Now.Ticks;

for (int i = LOOP_BEGIN; i < LOOP_END; i++)

{

DB_MyIsamSelect(i);

}

Console.WriteLine(“MyIsam SELECT Result: {0}”, DateTime.Now.Ticks - begin);

}

static void MemoryInsert()

{

long begin = DateTime.Now.Ticks;

for (int i = 0; i < LOOP_TOTAL; i++)

{

DB_MemoryInsert(OBJ);

}

Console.WriteLine(“Memory Insert Result: {0}”, DateTime.Now.Ticks - begin);

}

static void MemorySelect()

{

long begin = DateTime.Now.Ticks;

for (int i = LOOP_BEGIN; i < LOOP_END; i++)

{

DB_MemorySelect(i);

}

Console.WriteLine(“Memory SELECT Result: {0}”, DateTime.Now.Ticks - begin);

}

自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数Java工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但对于培训机构动则几千的学费，着实压力不小。自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年Java开发全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上Java开发知识点，真正体系化！

由于文件比较大，这里只是将部分目录截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且会持续更新！

如果你觉得这些内容对你有帮助，可以扫码获取！！（备注Java获取）

最后

由于篇幅限制，小编在此截出几张知识讲解的图解

《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取！

最后

由于篇幅限制，小编在此截出几张知识讲解的图解

[外链图片转存中…(img-XdUfZJTw-1713502543605)]

[外链图片转存中…(img-WqJMvX8A-1713502543606)]

[外链图片转存中…(img-yFuOdbiw-1713502543607)]

[外链图片转存中…(img-5CG3LS19-1713502543608)]

[外链图片转存中…(img-xET87gZx-1713502543609)]

《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取！