10万条数据批量更新怎么做?

如果 10 万条数据进行批量更新该怎么操作呢?我们一起来看看具体可以怎么做。

mysql 批量更新如果一条条去更新效率是相当的慢, 循环一条一条的更新记录,一条记录update一次,这样性能很差,也很容易造成阻塞。

mysql 批量更新共有以下四种办法

1、.replace into 批量更新

replace into test_tbl (id,drvalues (1,'2'),(2,'3'),...(x,'y');

 

2、insert into …on duplicate key update批量更新

insert into test_tbl (id,dr) values (1,'2'),(2,'3'),...(x,'y'on duplicate key update dr=values(dr);

 

3.创建临时表,先更新临时表,然后从临时表中update

create temporary table tmp(id int(4primary key,dr varchar(50));
insert into tmp values  (0,'gone'), (1,'xx'),...(m,'yy');
update test_tbl, tmp set test_tbl.dr=tmp.dr where test_tbl.id=tmp.id;

注意:这种方法需要用户有 temporary 表的 create 权限。

 

4、使用 mysql 自带的语句构建批量更新

mysql 实现批量 可以用点小技巧来实现:

UPDATE tableName
    SET orderId = CASE id 
        WHEN 1 THEN 3 
        WHEN 2 THEN 4 
        WHEN 3 THEN 5 
    END
WHERE id IN (1,2,3)

这句 sql 的意思是,更新 orderId 字段,如果id = 1 则 orderId 的值为 3,如果 id = 2 则 orderId 的值为 4……where 部分不影响代码的执行,但是会提高 sql 执行的效率。确保 sql 语句仅执行需要修改的行数,这里只有3条数据进行更新,而 where 子句确保只有 3 行数据执行。如果更新多个值的话,只需要稍加修改:

UPDATE categories 
    SET orderId = CASE id 
        WHEN 1 THEN 3 
        WHEN 2 THEN 4 
        WHEN 3 THEN 5 
    END, 
    title = CASE id 
        WHEN 1 THEN 'New Title 1'
        WHEN 2 THEN 'New Title 2'
        WHEN 3 THEN 'New Title 3'
    END
WHERE id IN (1,2,3)

到这里,已经完成一条 mysql 更新多条记录了。

根据我的测试,更新 100000 数据的性能就测试结果来看,测试当时使用replace into性能较好。

replace into 和 insert into on duplicate key update 不同在于:replace into 操作本质是对重复的记录先delete 后insert,如果更新的字段不全会将缺失的字段置为缺省值,用这个要悠着点否则不小心清空大量数据可不是闹着玩的。insert into 则是只update重复记录,不会改变其它字段。

posted on   数据与人文  阅读(179)  评论(0编辑  收藏  举报

相关博文:
阅读排行:
· 分享4款.NET开源、免费、实用的商城系统
· 全程不用写代码,我用AI程序员写了一个飞机大战
· MongoDB 8.0这个新功能碉堡了,比商业数据库还牛
· 记一次.NET内存居高不下排查解决与启示
· 白话解读 Dapr 1.15:你的「微服务管家」又秀新绝活了
历史上的今天:
2020-06-09 SQL Server 2014的数据库引擎新增功能(参考sqlserver官方文档)
2020-06-09 sqlserver常用资源消耗sql
2020-06-09 SQLSERVER跨服务器查询
2020-06-09 SQL Server 2014 中不推荐使用的数据库引擎功能
2020-06-09 sqlserver标记为正在还原
2020-06-09 SQLSERVER完整数据库还原(简单恢复模式)
2020-06-09 SQLSERVER完整数据库还原(完整恢复模式)
< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5

统计

点击右上角即可分享
微信分享提示