好久没写博客了,洗完澡一时兴起,小写一篇记录sql知识点吧。
由于之前公司业务的变更,需要做一个历史数据表数据迁移到新建的数据表中,刚被分配到这个任务时,马上打开历史数据表的相关结构,一看懵逼了。需求大概是把原来的几百张数据库表(里面大概有三四类表,由于数据量太大,都进行一定规则的分表)迁移到新建的数据库表(也是采用一定规则分表)。
第一阶段,采用insert语法批量添加数据。
由于数据表数据量太大了,业务变更也比较复杂,所以采用脚本形式实现数据迁移。
第二阶段,这是重点,采用 insert for update用法
原因是由于新表的某些列并不能在插入的时候直接拼接,由于后面再进行更新。一开始使用常规方法,一条条进行update操作,发现如果一条条进行更新操作的话,会对数据库进行大量的访问,服务器的负载和访问量会压力很大,这样是很不合理的,后面就想通过批量更新的方法进行操作。
示例,数据表为test,数据如下:
id | a | b |
1 | a是1 | b是1 |
2 | a是2 | b是2 |
现在批量更新id为1的a列数据为“a是11”,id为2的a列数据为“a是22”。
执行的sql为
# INSERT INTO test VALUES(1,’a是11’,’b是1’),(2,’a是22’,’b是2’) ON DUPLICATE KEY UPDATE a=VALUES(a);
总结:mysql中的”insert into tablename values() on duplicate key update columnName = valueName;” 用于批量更新数据库表的列数据是比较适用的。