写点什么

mysql 进阶 (十四) 批量更新与批量更新多条记录的不同值实现方法

  • 2022 年 7 月 21 日
  • 本文字数:2304 字

    阅读完需:约 8 分钟

mysql进阶(十四) 批量更新与批量更新多条记录的不同值实现方法

在 mysql 中批量更新我们可能使用 update,replace into 来操作,下面详细介绍 mysql 批量更新与性能。

一、批量更新

mysql更新语句很简单,更新一条数据的某个字段,一般这样写:

UPDATE mytable SET myfield = 'value' WHERE other_field = 'other_value';
复制代码

如果更新同一字段为同一个值,mysql 也很简单,修改下 where 即可:

UPDATE mytable SET myfield = 'value' WHERE other_field in ('other_values');
复制代码

这里注意‘other_values' 是一个逗号(,)分隔的字符串,如:1,2,3

那如果更新多条数据为不同的值,可能很多人会这样写:

foreach ($display_order as $id => $ordinal) { 
    $sql = "UPDATE categories SET display_order = $ordinal WHERE id = $id"; 
    mysql_query($sql); 
}
复制代码

即是循环一条一条的更新记录。一条记录update一次,这样性能很差,也很容易造成阻塞。

那么能不能一条 sql 语句实现批量更新呢?mysql 并没有提供直接的方法来实现批量更新,但是可以用点小技巧来实现。

UPDATE mytable 
    SET myfield = CASE id 
        WHEN 1 THEN 'value'
        WHEN 2 THEN 'value'
        WHEN 3 THEN 'value'
    END
WHERE id IN (1,2,3);
复制代码

这里使用了case when 这个小技巧来实现批量更新。

二、举个例子

UPDATE categories 
    SET display_order = CASE id 
        WHEN 1 THEN 3 
        WHEN 2 THEN 4 
        WHEN 3 THEN 5 
    END
WHERE id IN (1,2,3);
复制代码

这句 sql 的意思是,更新 display_order 字段,如果 id=1 则 display_order 的值为 3,如果 id=2 则 display_order 的值为 4,如果 id=3 则 display_order 的值为 5。即是将条件语句写在了一起。


这里的 where 部分不影响代码的执行,但是会提高 sql 执行的效率。确保 sql 语句仅执行需要修改的行数,这里只有 3 条数据进行更新,而 where 子句确保只有 3 行数据执行。

如果更新多个值的话,只需要稍加修改:

UPDATE categories 
    SET display_order = CASE id 
        WHEN 1 THEN 3 
        WHEN 2 THEN 4 
        WHEN 3 THEN 5 
    END, 
    title = CASE id 
        WHEN 1 THEN 'New Title 1'
        WHEN 2 THEN 'New Title 2'
        WHEN 3 THEN 'New Title 3'
    END
WHERE id IN (1,2,3);
复制代码

到这里,已经完成一条 mysql 语句更新多条记录了。

但是要在业务中运用,需要结合服务端语言,这里以 php 为例,构造这条 mysql 语句:

$display_order = array( 
    1 => 4, 
    2 => 1, 
    3 => 2, 
    4 => 3, 
    5 => 9, 
    6 => 5, 
    7 => 8, 
    8 => 9 
); 
$ids = implode(',', array_keys($display_order)); 
$sql = "UPDATE categories SET display_order = CASE id "; 
foreach ($display_order as $id => $ordinal) { 
    $sql .= sprintf("WHEN %d THEN %d ", $id, $ordinal); 

$sql .= "END WHERE id IN ($ids)"; 
echo $sql;
复制代码

这个例子,有 8 条记录进行更新。代码也很容易理解,你学会了吗

三、性能分析

当使用上万条记录利用mysql批量更新,发现使用最原始的批量 update 发现性能很差,有以下三种优化办法:

3.1 批量 update,一条记录 update 一次,性能很差

update test_tbl set dr='2' where id=1;
复制代码

3.2 replace into 或者 insert into ...on duplicate key update

replace into test_tbl (id,dr) values (1,'2'),(2,'3'),...(x,'y');
复制代码

或者使用

insert into test_tbl (id,dr) values  (1,'2'),(2,'3'),...(x,'y') on duplicate key update dr=values(dr);
复制代码

3.3 创建临时表,先更新临时表,然后从临时表中 update

create temporary table tmp(id int(4) primary key,dr varchar(50));
insert into tmp values  (0,'gone'), (1,'xx'),...(m,'yy');
update test_tbl, tmp set test_tbl.dr=tmp.dr where test_tbl.id=tmp.id;
复制代码

注意:这种方法需要用户有 temporary 表的 create 权限。

下面是上述方法 update 100000 条数据的性能测试结果:

逐条 update

real    0m15.557s
user    0m1.684s
sys    0m1.372s
replace into
real    0m1.394s
user    0m0.060s
sys    0m0.012s
insert into on duplicate key update
real    0m1.474s
user    0m0.052s
sys    0m0.008s
create temporary table and update:
real    0m0.643s
user    0m0.064s
sys    0m0.004s
复制代码

就测试结果来看,测试当时使用 replace into 性能较好。

replace into  和insert into on duplicate key update的不同在于:

  • replace into操作本质是对重复的记录先 delete 后 insert,如果更新的字段不全会将缺失的字段置为缺省值

  • insert into 则是只update重复记录,不会改变其它字段。

问题分析:

Error Code: 1175. You are using safe update mode and you tried to update a table without a WHERE that uses a KEY column To disable safe mode, toggle the option in Preferences SQL Queries and reconnect.

解决方案:

原因是在safe mode下,要强制安全点,update只能跟where了, 要取消这个限制,可以:

SET SQL_SAFE_UPDATES=0;

发布于: 刚刚阅读数: 3
用户头像

No Silver Bullet 2021.07.09 加入

岂曰无衣 与子同袍

评论

发布
暂无评论
mysql进阶(十四) 批量更新与批量更新多条记录的不同值实现方法_MySQL 数据库_No Silver Bullet_InfoQ写作社区