mysql text溢出_大部分数据没有行溢出的text字段是否需要拆表

最新推荐文章于 2022-09-11 10:28:57 发布
最新推荐文章于 2022-09-11 10:28:57 发布
阅读量169 收藏
点赞数
文章标签： mysql text溢出
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_35133198/article/details/113220723
版权

比如一个论坛系统的回帖表，多数情况下这个回帖的内容都是简短的，只有少部分内容长。

而在显示中这个内容字段是常用的，还有必要把这个内容字段单独拆出来吗？

namespace Koogua\Model\Entity;

class Reply extends EntityBase

{

const STATUS_PENDING = 1; // 待定

const STATUS_APPROVED = 2; // 审通

const STATUS_REJECTED = 3; // 审拒

const STATUS_DELETED = 4; // 删除

/**

* 主键编号

* @var integer

*/

public $id;

/**

* 回复内容

* @var string

*/

public $content;

/**

* 提及用户

* @var string

*/

public $mentions;

/**

* 用户编号

* @var integer

*/

public $userId;

/**

* 主题编号

* @var integer

*/

public $topicId;

/**

* 版块编号

* @var integer

*/

public $forumId;

/**

* 置顶标识

* @var integer

*/

public $sticked;

/**

* 状态标识

* @var integer

*/

public $status;

/**

* 评论计数

* @var integer

*/

public $commentCount;

/**

* 关注计数

* @var integer

*/

public $watchCount;

/**

* 收藏计数

* @var integer

*/

public $favoriteCount;

/**

* 赞同计数

* @var integer

*/

public $agreeCount;

/**

* 反对计数

* @var integer

*/

public $opposeCount;

/**

* 举报计数

* @var integer

*/

public $reportCount;

/**

* 创建时间

* @var integer

*/

public $createTime;

/**

* 更新时间

* @var integer

*/

public $updateTime;

public function getSource()

{

return 'Reply';

}

public function beforeCreate()

{

$this->createTime = time();

}

}

林屋公子
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
mysql字段太多解决_mysql text 字段过多解决方法
weixin_39759060的博客
01-29 2322
测试结论mysql版本 5.1表类型： innodb， row_format=compact (这是默认的行格式)插入超过10个blob， blob的数据量很小(<768字节)， 插入成功。插入超过10个blob， blob的数据量很大(>768字节)， 插入失败：报 Got error 139 from storage engine。注意，如果mysql服务器版本是5.1， inno...
字符串常用的系统函数（go语言）
weixin_43823255的博客
11-25 114
1.统计字符串的长度，按字节 func main(){ //go统一编码为utf-8,字母数字占一个字节，汉字占3个字节 str:="hello北" len(str) //8 } 2.字符串遍历，注意中文 package main import ( "fmt" ) func main(){ str:="hello北" r:=[]rune(str) for i:=0;i<len(r);i++{ fmt.Println(r[i]) } } 3.字符串转整数 package m
mysql中添加字段
热门推荐
m0_54850467的博客
09-11 4万+
深知大多数初中级Java工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但对于培训机构动则近万的学费，着实压力不小。自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！因此收集整理了一份《Java开发全套学习资料》送给大家，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。
mysql的text/blob和行溢出
congdiku5262的博客
02-04 196
blob存储二进制，text存储文本，前者可当做大个的varbinary，而后者可看成升级版的varchar(与long varchar等价)； 两者都有4种子类型：tiny，normal(默认)，medium...
mysql用text时够用却显示超过长度限制
TYH的博客
01-14 3805
http://www.jb51.net/article/50364.htm show VARIABLES like ‘%max_allowed_packet%’; set global max_allowed_packet = 20*1024*1024; 实际使用解决方案： ● 复制一份my.default.ini 然后重命名成my.ini ● 在my.ini文件中,[mysql
详解MySQL 表中非主键列溢出情况监控
09-08
MySQL数据库在设计表结构时，通常会为每个字段指定一种数据类型，如整型(int)、浮点型(float)、字符型(varchar)等。在实际应用中，非主键列，即不是表唯一标识的列，也可能会遇到数据溢出的问题。数据溢出发生在试图...
MySQL表自增id溢出的故障复盘解决
09-08
MySQL表自增id溢出是数据库管理中可能出现的一种情况，特别是在高并发写入场景下，如果表设计不当，可能会导致自增id超出其数据类型的范围，进而引发一系列问题。本故障复盘解决的过程旨在提供一个应对策略，确保...
关于MySQL的整型数据的内存溢出问题的应对方法
09-10
4. **使用适当的数据类型**：对于可能会出现溢出的情况，特别是涉及到货币和计数的字段，应考虑使用decimal或其他更适合的类型，以确保精度。 5. **编写安全的SQL代码**：在进行数学运算时，使用事务和异常处理来...
MySQ中 text类型的最大长度
12-14
在处理这类数据时，需要根据实际需求选择合适的数据类型，因为MySQL提供了不同大小的text类型，以适应不同的存储需求。以下是MySQL中text类型的详细说明： 1. **TINYTEXT**: 这是最小的文本类型，最大长度为255个...
mysql溢出_MySQL 行溢出数据
weixin_33290540的博客
01-18 297
MySQL 行溢出数据MySQL 对一条记录占用的最大储存空间是有限制的，除了 BLOB 和 TEXT 类型之外，其他所有列 (不包括隐藏列和记录头信息) 占用的字节长度不能超过 65535 个字节，当记录长度超过限制时，MySQL 会建议使用 TEXT 或 BLOB 类型储存数据储存上限 65535 个字节不仅包含本身的数据，还包含一些其他数据 (storage overhead)，以 VERC...
MySQL行溢出与最大行
Tsong
01-08 3964
#MySQL行溢出与最大行 MySQL每个表有4096个列的硬限制,MySQL表的最大行大小限制为65535字节 -- innodb_page_size show variables like 'innodb_page_size'; -- 文件格式 show variables like 'innodb_file_format'; -- 行格式 show table status l
MySql字段类型text的大小及相关问题
qq_35909525的博客
09-26 7603
类型text主要分为四种： TINYTEXT 256 bytes   TEXT 65,535 bytes 64kb MEDIUMTEXT  16,777,215 bytes ~16MB LONGTEXT 4,294,967,295 bytes ~4GB           但是text等字段需要慎重使用。多个text字段会...
MySQL--表的拆分
BtWangZhi的博客
03-03 691
表的垂直拆分，控制表的宽度。 1 经常一起查询的列放到一起。 Text，blob等大字段拆分到附加表中。 表的水平拆分 为了控制表的大小可以进行表的水平拆分。 ...
mysql text 字段过多解决方法
怒放的程序
09-26 1338
测试结论mysql版本 5.1表类型： innodb， row_format=compact （这是默认的行格式） 插入超过10个blob， blob的数据量很小（&lt;768字节）， 插入成功。插入超过10个blob， blob的数据量很大（&gt;768字节）， 插入失败：报 Got error 139 from storage engine。 注意，如果mysql服务器版本是5.1...
repost: mysql之row_format、溢出页（overflow pages）、mysql数据类型(varchar、text、blob、json)
ChengChengCheng的博客
05-27 687
repost: https://blog.csdn.net/aecuhty88306453/article/details/102196591 MySQL数据行(row_format)溢出的深入理解. 在 mysql中， 若一张表里面不存在varchar、text以及其变形、blob以及其变形的字段的话，那么张这个表其实也叫静态表，即该表的row_format是fixed，就是说每条记录所占用的字节一样。其优点读取快，缺点浪费额外一部分空间。 若一张表里面存在varchar、text以及其变形、blob以及
解决Mysql存入大量TEXT类型的数据报错
LuisChen的博客
03-21 6656
主要的原因是因为max_sort_length的默认值为1024, 解决办法：该参数是动态参数，任何客户端都可以在Mysql数据库运行时更改该参数的值，例如： 1.首先应该查询一下这个参数的默认值为多少mysql> SELECT @@global.max_sort_length;2.然后去设置这个值：mysql> SET GLOBAL max_sort_length=2048; //2048这
MySQL数据类型 BLOB和TEXT
快递小可的博客
09-24 5113
MySQL数据类型 BLOB和TEXT
Java导出mysql表数据因为数据量大需要对数据进行分页查询或者使用多线程并发导出数据，以提高导出数据的效率和性能。
最新发布
05-29
是的，当需要导出的数据量很大时，分页查询或者使用多线程并发导出数据可以提高导出数据的效率和性能。 1. 分页查询导出数据 分页查询是将数据分批次查询，每次查询一定数量的数据，然后将查询出来的数据写入到文件中。这样可以避免一次性查询大量数据导致内存溢出的问题，同时也可以减少数据库的负载。 以下是示例代码： ``` import java.io.BufferedWriter; import java.io.FileWriter; import java.io.IOException; import java.sql.*; public class ExportData { public static void main(String[] args) { // JDBC连接参数 String url = "jdbc:mysql://localhost:3306/database?useSSL=false"; String user = "username"; String password = "password"; // 查询语句 String sql = "SELECT * FROM table LIMIT ?, ?"; // 导出数据文件路径 String filePath = "data.txt"; // 每页查询的数据量 int pageSize = 10000; try { // 创建JDBC连接 Connection conn = DriverManager.getConnection(url, user, password); // 获取总数据量 Statement countStmt = conn.createStatement(); ResultSet countRs = countStmt.executeQuery("SELECT COUNT(*) FROM table"); countRs.next(); int total = countRs.getInt(1); countRs.close(); countStmt.close(); // 分页查询数据 int pageCount = (int) Math.ceil((double) total / pageSize); for (int i = 0; i < pageCount; i++) { // 计算分页查询的起始位置和数据量 int offset = i * pageSize; int limit = pageSize; // 执行查询 PreparedStatement stmt = conn.prepareStatement(sql); stmt.setInt(1, offset); stmt.setInt(2, limit); ResultSet rs = stmt.executeQuery(); // 将数据写入文件 BufferedWriter writer = new BufferedWriter(new FileWriter(filePath, true)); // 追加写入文件 while (rs.next()) { // 根据数据类型获取字段值 String col1 = rs.getString("col1"); int col2 = rs.getInt("col2"); // ... // 将数据写入文件 writer.write(col1 + "," + col2 + "\n"); } writer.close(); // 关闭查询结果集和语句 rs.close(); stmt.close(); } // 关闭JDBC连接 conn.close(); } catch (SQLException | IOException e) { e.printStackTrace(); } } } ``` 在这个示例中，我们使用分页查询将数据分批次查询，每次查询10000条数据，然后将查询出来的数据写入到文件中。 2. 多线程并发导出数据 多线程并发导出数据是使用多个线程同时查询数据和写入文件，以提高导出数据的效率和性能。可以将数据分成多个块，每个线程负责查询和写入一个块的数据。 以下是示例代码： ``` import java.io.BufferedWriter; import java.io.FileWriter; import java.io.IOException; import java.sql.*; import java.util.ArrayList; import java.util.List; import java.util.concurrent.*; public class ExportData { public static void main(String[] args) { // JDBC连接参数 String url = "jdbc:mysql://localhost:3306/database?useSSL=false"; String user = "username"; String password = "password"; // 查询语句 String sql = "SELECT * FROM table WHERE id >= ? AND id < ?"; // 导出数据文件路径 String filePath = "data.txt"; // 线程池参数 int threadCount = 4; // 线程数量 int pageSize = 10000; // 每页查询的数据量 try { // 创建JDBC连接 Connection conn = DriverManager.getConnection(url, user, password); // 获取总数据量 Statement countStmt = conn.createStatement(); ResultSet countRs = countStmt.executeQuery("SELECT COUNT(*) FROM table"); countRs.next(); int total = countRs.getInt(1); countRs.close(); countStmt.close(); // 计算每个线程查询的数据块 int blockCount = (int) Math.ceil((double) total / pageSize); int blockSize = (int) Math.ceil((double) blockCount / threadCount); // 创建线程池 ExecutorService executor = Executors.newFixedThreadPool(threadCount); // 提交任务 List<Future<?>> futures = new ArrayList<>(); for (int i = 0; i < threadCount; i++) { int start = i * blockSize; int end = Math.min((i + 1) * blockSize, blockCount); long from = start * pageSize; long to = end * pageSize; Future<?> future = executor.submit(() -> { try { // 执行查询 PreparedStatement stmt = conn.prepareStatement(sql); stmt.setLong(1, from); stmt.setLong(2, to); ResultSet rs = stmt.executeQuery(); // 将数据写入文件 BufferedWriter writer = new BufferedWriter(new FileWriter(filePath, true)); // 追加写入文件 while (rs.next()) { // 根据数据类型获取字段值 String col1 = rs.getString("col1"); int col2 = rs.getInt("col2"); // ... // 将数据写入文件 writer.write(col1 + "," + col2 + "\n"); } writer.close(); // 关闭查询结果集和语句 rs.close(); stmt.close(); } catch (SQLException | IOException e) { e.printStackTrace(); } }); futures.add(future); } // 等待所有任务完成 for (Future<?> future : futures) { future.get(); } // 关闭线程池和JDBC连接 executor.shutdown(); conn.close(); } catch (SQLException | InterruptedException | ExecutionException | IOException e) { e.printStackTrace(); } } } ``` 在这个示例中，我们使用线程池同时查询数据和写入文件，将数据分成多个块，每个线程负责查询和写入一个块的数据。注意，在实际应用中，可能需要根据服务器性能和网络带宽等情况调整线程数量和分块大小，以达到最佳的导出数据效率和性能。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值