MySQL如何在海量数据的情况下添加新字段

最新推荐文章于 2024-07-21 10:05:58 发布
最新推荐文章于 2024-07-21 10:05:58 发布
阅读量1.8k 收藏 2
点赞数
分类专栏： # MySQL 文章标签： 大表 添加字段 海量数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xhaimail/article/details/127243454
版权

MySQL下增加字段相信很多小伙伴都不陌生，随手就可以写出来。但如果在线上有一张表数据量特别大，执行添加新字段操作时可能会严重拖垮整个数据库服务器或服务崩溃等。

解决方案：

方案一

统计服务使用率，在服务使用率最低的时候选择添加字段

方案二

使用扩展表方案，在数据操作时关联扩展表操作

方案三

备份表或创建临时表的方式

  1. 创建一张临时表tmp_test，并添加需要的字段
  2. 迁移test表中的数据到tmp_test
  3. 根据需要删除或修改老表或新表

方案四

先在从库添加字段操作，然后再主从切换

旷野历程
关注
专栏目录
mysql数据量大增加字段_MySQL 8.0.19亿级数据如何秒速增加字段？
weixin_33564130的博客
02-28 4305
概述今天主要介绍一下MySQL 8.0.19 instant add column的新特性，基于亿级数据秒速增加字段，下面一起来看看吧~一、MySQL DDL 的方法MySQL 在大型表上的 DDL 会带来耗时较久、负载较高、额外空间占用、MDL、主从同步延时等情况。需要特别引起重视，而MySQL 的 DDL 有很多种方法。MySQL 本身自带三种方法，分别是：copy、inplace、insta...
mysql大量用户使用时增加新字段_mysql大表在不停机的情况下增加字段该怎么处理...
weixin_39768247的博客
01-27 483
MySQL中给一张千万甚至更大量级的表添加字段一直是比较头疼的问题，遇到此情况通常该如果处理？本文通过常见的三种场景进行案例说明。1、 环境准备数据库版本：5.7.25-28(Percona 分支)服务器配置： 3台centos 7虚拟机，配置均为2CPU 2G内存数据库架构： 1主2从的MHA架构(为了方便主从切换场景的演示，如开启GTID，则两节点即可)，关于MHA搭建可参考此文MyS...
【MySQL】大数据表里面插入字段的操作
Seagull的专栏
09-23 3706
如何在海量的数据里面，高效的新增一个字段呢，相信看完本文章，会对你有所启发。
【SQL】百万千万级最大表如何添加字段
最新发布
hui_zai_的博客
07-21 735
百万千万级最大表如何添加字段
快速给数据库大表添加字段或索引方法
热门推荐
春风化雨
07-14 1万+
第一，基础方法增加字段基本方法，该方法适合十几万的数据量，可以直接进行加字段操作。1ALTER TABLE tbl_tpl ADD title(255) DEFAULT '' COMMENT '标题' AFTER id;但是，线上的一张表如果数据量很大，执行加字段操作就会锁表，这个过程可能需要很长时间甚至导致服务崩溃，那么这样操作就有风险。第二，临时表方法思路如下：① 创建一个临时的新表，首先复制...
MySQL上百万条数据怎么加字段跟索引
qq_29309533的博客
03-16 3601
MySQL上百万条数据怎么加字段跟索引 开发中，数据库加字段属于常规操作，加完字段如果牵扯到查询的话最好还得加索引，如果数据只有几千条或者几万条可以直接执行sql添加字段跟索引，但是如果碰到上百万上千万条数据，那就不能用这种方式了，因为加字段和索引都会锁表，会影响接口服务不可用 因此，在保证对接口影响最小的情况下可以使用下面这种方式：思路是新建一个在原表结构上添加新字段及新索引的新表结构，然后插入原表的数据，修改原表表名，紧接着修改新表表名，改表名速度很快，因此对接口服务的影响会降低到忽略不计，操作过程如下
Mysql8秒级加字段_MySQL8.0大表秒加字段
weixin_29541695的博客
01-21 1076
前言：很早就听说 MySQL8.0 支持快速加列，可以实现大表秒级加字段。笔者自己本地也有8.0环境，但一直未进行测试。本篇文章我们就一起来看下 MySQL8.0 快速加列到底要如何操作。1.了解背景信息表结构的变更是业务运行过程中比较常见的需求之一，在 MySQL 的环境中，可以使用 Alter 语句来完成这些操作，这些 Alter 语句对应的操作通常也称之为 DDL 操作。通常情况下大表的 D...
MySQL海量数据单一字段更新
Return_head的博客
05-31 739
前言 昨天发了一篇MySQL中索引对千万级数据查询效率优化实践的博文 文章链接：https://blog.csdn.net/Return_head/article/details/90699140 所以手上有着5000万的数据，很多以前想做的实验也有机会去尝试了。今天上课突然想起来一篇数据库的面试题。 大概是说：某公司有一张亿级的用户表，用户表有一个积分字段。这个字段会在每年新年凌晨0点的...
MySQL海量数据存储与优化（上）
weixin_41274719的博客
01-19 1173
MySQL起源和分支 MySQL 是最流行的关系型数据库软件之一，由于其体积小、速度快、开源免费、简单易用、维护成本 低等，在集群架构中易于扩展、高可用，因此深受开发者和企业的欢迎。 Oracle和MySQL是世界市场占比最高的两种数据库。 IOE：IBM的服务器，Oracle数据库，EMC存储设备。都是有钱的公司产品采购，例如银行、电信、石 油、证券等大企业。 Oracle：垄断，有钱的大企业采用，互联网企业之外使用第一。 MySQL：互联网高速发展，互联网企业使用第一。 My
生产级MySQL海量数据表结构变更实战
qq_36211262的博客
08-21 159
Mysql下，对于海量数据的大表（这里亲测的是千万级），需要导出表数据，并且需要对表字段进行加工处理，比如增、删、改等操作。
mysql海量数据的存储和访问解决方案借鉴.pdf
11-13
路由规则决定了数据如何分布到各个数据库，而如何在不大量迁移数据的情况下增加数据库容量（添加更多机器节点）是一项复杂任务。核心问题是如何设计灵活且高效的路由策略，同时确保系统的可扩展性。 数据切分的实现...
MySQL中大数据表增加字段的实现思路
09-09
最近遇到的一个问题，需要在一张将近1000万数据量的表中添加加一个字段，但是直接添加会导致mysql 奔溃，所以需要利用其他的方法进行添加，这篇文章主要给大家介绍了MySQL中大数据表增加字段的实现思路，需要的朋友可以参考借鉴。
mysql 轨迹数据存储_基于Tablestore实现海量运动轨迹数据存储
weixin_39905624的博客
12-21 1498
前言现在越来越多的人都开始关心自己的运动数据，比如每日的计步、跑步里程、骑行里程等。运动APP与运动类的穿戴设备借助传感器、地图、GPS定位等技术，收集好运动数据以后，通过与互联网社交功能结合，产生了一种新的运动模式。用户不仅可以查看与分析自己的运动数据，还可以分享跑步路线、骑行路线给附近的运动好友，还可以组团跑步、推荐运动设备等，吸引了各年龄段的用户。核心需求现在比较流行的一些运动APP和穿戴设...
mysql 如何给大表添加字段
weixin_30938149的博客
10-16 797
1. 能不加字段就不要加， 能不修改字段就不要修改， 能不删除字段就不要删除， 等等为什么要删除字段呢？ 如果没事，不要蛋疼的找事。 实际上，我们那次更新失败后， 我们并没有增加那个字段， 然后我们一直运行到今天， 但是后来还是增加了其他字段2. 增加字段的情况下， 如果可以通过增加一个新的表来增加这个字段， 那么就增加一个新的表， 通过cache 或 程序来实现join 的效果3. 如果能停机，...
mysql给大表加字段
m0_46360888的博客
08-29 7528
给大表加字段
Mysql表数据比较大的情况下修改添加字段的方法
yyj12138的博客
03-15 6942
Mysql表数据比较大的情况下修改添加字段的方法 如果一张表在后期的维护中，发现需要加字段以满足当下的需求，但是数据量很大有百万甚至千万级的数据，要如何修改表字段呢。 直接执行使用alter语句肯定是不现实的，这涉及到锁表重建表结构等操作，假设这时候还有其他线程在跑，等一天都改不过来。 这里整理一个比较简单的方法 1、对照要操作的表结构创建一张零时表 CREATE TABLE product_copy LIKE product; 2、将要修改的表结构改在零时表上面 3、导出表product数据，并导入到零
mysql 为大表新增字段或索引
J_bean的博客
01-17 1074
mysql 为大表新增字段或索引
已有大量数据的表加字段的方法
tiantian1980的专栏
11-15 5347
如果一个表中有大量的数据库，增加字段或增加字段长度，经常会弹出以下错误"超时时间已到，无法修改表" 用以下方法可解决问题： --增加字段 alter   table   表名   add     字段   字段类型 例如：  use ASE_order alter table dbo.T_OrderBase add RemarOnlyCompany  varchar(MAX) --
MySQL分区表详解：高效管理海量历史数据
它适合于分区键为整数类型的情况，如`customer_id`字段。 - 创建一个使用`customer_id`作为分区键的HASH分区表示例： ``` CREATE TABLE customer_login_log ( customer_id int(10) unsigned NOT NULL, login_...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

旷野历程

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值