当前位置: 首页 > news >正文

MYSQL的批量插入或更新方法优化

2019独角兽企业重金招聘Python工程师标准>>> hot3.png

mysql当插入重复时更新的方法: 
第一种方法:

示例一:插入多条记录 
假设有一个主键为 client_id 的 clients 表,可以使用下面的语句:

INSERT INTO clients  
(client_id,client_name,client_type)  
SELECT supplier_id,supplier_name,'advertising'  
FROM suppliers  
WHERE not exists(select * from clients where clients.client_id=suppliers.supplier_id);  
  • 1
  • 2
  • 3
  • 4
  • 5

示例一:插入单条记录

INSERT INTO clients  
(client_id,client_name,client_type)  
SELECT 10345,'IBM','advertising'  
FROM dual  
WHERE not exists (select * from clients where clients.client_id=10345);  
  • 1
  • 2
  • 3
  • 4
  • 5

使用 dual 做表名可以让你在 select 语句后面直接跟上要插入字段的值,即使这些值还不存在当前表中。 
第二种方法:

举例:

最近在做项目的时候,遇到这样的一个问题,就是我每做完一件事情,都要更新一下统计表,然而要更新统计表,就要根据主键去统计表里面去查询是否已经有这样的一条记录,如果有那么就更新,如果没有那么就插入一条记录,开始我就是这么干的,结果被老大给否决了,他说可以用on duplicate key update去做。下面就实际操作一下吧: 
表结构: 
+———–+———+——+—–+———+——-+ 
| Field | Type | Null | Key | Default | Extra | 
+———–+———+——+—–+———+——-+ 
| player_id | int(11) | NO | PRI | NULL | | 
| count | int(11) | YES | | NULL | | 
+———–+———+——+—–+———+——-+ 
2 rows in set (0.01 sec) 
老做法是写三条sql语句:

select * from player_count where player_id = 1;//查询统计表中是否有记录
insert into player_count(player_id,count) value(1,1);//没有记录就执行insert 操作
update player_count set count = count+1 where player_id = 1;//有记录就执行update操作
  • 1
  • 2
  • 3

这种写法比较麻烦 
用on duplicate key update 的做法如下:

insert into player_count(player_id,count) value(1,1) on duplicate key update count=count+1;
  • 1

这样每次不管插入还是更新都调用这句语句就能达到我们要的效果,省了不少的判断。

INSERT 中ON DUPLICATE KEY UPDATE的使用(本文重点) 
如果您指定了ON DUPLICATE KEY UPDATE,并且插入行后会导致在一个UNIQUE索引或PRIMARY KEY中出现重复值,则执行旧行UPDATE。例如,如果列a被定义为UNIQUE,并且包含值1,则以下两个语句具有相同的效果:

mysql>INSERT INTO table (a,b,c) VALUES (1,2,3) ON DUPLICATE KEY UPDATE c=c+1;  
mysql>UPDATE table SET c=c+1 WHERE a=1;  
  • 1
  • 2

如果行作为新记录被插入,则受影响行的值为1;如果原有的记录被更新,则受影响行的值为2。

注释:如果列b也是唯一列,则INSERT与此UPDATE语句相当:

mysql>UPDATE table SET c=c+1 WHERE a=1 OR b=2 LIMIT 1;  
  • 1

如果a=1 OR b=2与多个行向匹配,则只有一个行被更新。通常,您应该尽量避免对带有多个唯一关键字的表使用ON DUPLICATE KEY子句。 
您可以在UPDATE子句中使用VALUES(col_name)函数从INSERT...UPDATE语句的INSERT部分引用列值。换句话说,如果没有发生重复关键字冲突,则UPDATE子句中的VALUES(col_name)可以引用被插入的col_name的值。本函数特别适用于多行插入。VALUES()函数只在INSERT…UPDATE语句中有意义,其它时候会返回NULL。 
示例:

mysql>INSERT INTO table (a,b,c) VALUES (1,2,3),(4,5,6)  
          ->ON DUPLICATE KEY UPDATE c=VALUES(a)+VALUES(b); 
  • 1
  • 2

本语句与以下两个语句作用相同:

mysql>INSERT INTO table (a,b,c) VALUES (1,2,3)  
          ->ON DUPLICATE KEY UPDATE c=3;  
mysql>INSERT INTO table (a,b,c) VALUES (4,5,6)  
          ->ON DUPLICATE KEY UPDATE c=9;  
  • 1
  • 2
  • 3
  • 4

当您使用ON DUPLICATE KEY UPDATE时,DELAYED选项被忽略。 
第三种方法:

REPLACE语句 
  我们在使用数据库时可能会经常遇到这种情况。如果一个表在一个字段上建立了唯一索引,当我们再向这个表中使用已经存在的键值插入一条记录,那将会抛出一个主键冲突的错误。当然,我们可能想用新记录的值来覆盖原来的记录值。如果使用传统的做法,必须先使用DELETE语句删除原先的记录,然后再使用INSERT插入新的记录。而在MySQL中为我们提供了一种新的解决方案,这就是REPLACE语句。使用REPLACE插入一条记录时,如果不重复,REPLACE就和INSERT的功能一样,如果有重复记录,REPLACE就使用新记录的值来替换原来的记录值。

  使用REPLACE的最大好处就是可以将DELETE和INSERT合二为一,形成一个原子操作。这样就可以不必考虑在同时使用DELETE和INSERT时添加事务等复杂操作了。

  在使用REPLACE时,表中必须有唯一索引,而且这个索引所在的字段不能允许空值,否则REPLACE就和INSERT完全一样的。

  在执行REPLACE后,系统返回了所影响的行数,如果返回1,说明在表中并没有重复的记录,如果返回2,说明有一条重复记录,系统自动先调用了DELETE删除这条记录,然后再记录用INSERT来插入这条记录。如果返回的值大于2,那说明有多个唯一索引,有多条记录被删除和插入。

  REPLACE的语法和INSERT非常的相似,如下面的REPLACE语句是插入或更新一条记录。

REPLACE INTO users (id,name,age) VALUES(123, '赵本山', 50);
  • 1

  
  插入多条记录:

REPLACE INTO users(id, name, age)

VALUES(123, '赵本山', 50), (134,'Mary',15);  
  • 1
  • 2
  • 3

REPLACE也可以使用SET语句

REPLACE INTO users SET id = 123, name = '赵本山', age = 50;  
  • 1

  上面曾提到REPLACE可能影响3条以上的记录,这是因为在表中有超过一个的唯一索引。在这种情况下,REPLACE将考虑每一个唯一索引,并对每一个索引对应的重复记录都删除,然后插入这条新记录。假设有一个table1表,有3个字段a, b, c。它们都有一个唯一索引。

CREATE TABLE table1(a INT NOT NULL UNIQUE,b INT NOT NULL UNIQUE,c INT NOT NULL UNIQUE);
  • 1

  假设table1中已经有了3条记录

  a b c 
  1 1 1 
  2 2 2 
  3 3 3

  下面我们使用REPLACE语句向table1中插入一条记录。

 REPLACE INTO table1(a, b, c) VALUES(1,2,3);
  • 1

  返回的结果如下

  Query OK, 4 rows affected (0.00 sec)

  在table1中的记录如下

  a b c 
  1 2 3

总结:

  1. DELAYED 做为快速插入,并不是很关心失效性,提高插入性能。
  2. Ignore 只关注主键对应记录是不存在,无则添加,有则忽略。

  3. ON DUPLICATE KEY UPDATE 在添加时操作,关注非主键列,注意与ignore的区别,有则更新指定列,无则添加。

转载于:https://my.oschina.net/u/3553591/blog/1838459

相关文章:

  • Redis 如何分布式,来看京东金融的设计与实践
  • 华为云,有技术,有未来
  • 查看数据库账号
  • 不小心删数据库是一种怎样的体验?
  • 正面反击 Google、FB 等巨头,万维网之父携 Solid 归来
  • cacti 的 “FATAL: Cannot connect to MySQL server on
  • 人机大战引关注 人工智能概念股有望受追捧
  • 0705作业
  • Js模块化之-import和export
  • DevC++连接MySQL可用详细教程
  • LNMP架构 (Ⅱ)——nginx相关配置、nginx代理
  • ----------
  • 重装系统的时候重装不了该怎么办
  • EOS技术贴-如何创建EOS钱包和账号并发起转账和投票
  • 一、typescript介绍和安装
  • 「译」Node.js Streams 基础
  • Android开发 - 掌握ConstraintLayout(四)创建基本约束
  • Apache Zeppelin在Apache Trafodion上的可视化
  • Flannel解读
  • iOS高仿微信项目、阴影圆角渐变色效果、卡片动画、波浪动画、路由框架等源码...
  • JDK9: 集成 Jshell 和 Maven 项目.
  • MYSQL如何对数据进行自动化升级--以如果某数据表存在并且某字段不存在时则执行更新操作为例...
  • python_bomb----数据类型总结
  • vue-loader 源码解析系列之 selector
  • 百度地图API标注+时间轴组件
  • 持续集成与持续部署宝典Part 2:创建持续集成流水线
  • 分布式任务队列Celery
  • 后端_ThinkPHP5
  • 聊聊hikari连接池的leakDetectionThreshold
  • 实战|智能家居行业移动应用性能分析
  • 树莓派 - 使用须知
  • 算法系列——算法入门之递归分而治之思想的实现
  • ​LeetCode解法汇总2182. 构造限制重复的字符串
  • ​渐进式Web应用PWA的未来
  • # C++之functional库用法整理
  • #{}和${}的区别是什么 -- java面试
  • #AngularJS#$sce.trustAsResourceUrl
  • #if #elif #endif
  • #我与Java虚拟机的故事#连载06:收获颇多的经典之作
  • (3)(3.2) MAVLink2数据包签名(安全)
  • (3)Dubbo启动时qos-server can not bind localhost22222错误解决
  • (6)设计一个TimeMap
  • (6)添加vue-cookie
  • (Redis使用系列) SpringBoot 中对应2.0.x版本的Redis配置 一
  • (附源码)ssm捐赠救助系统 毕业设计 060945
  • (每日持续更新)jdk api之FileReader基础、应用、实战
  • (学习日记)2024.04.04:UCOSIII第三十二节:计数信号量实验
  • (一)Linux+Windows下安装ffmpeg
  • (转)linux 命令大全
  • (转)ORM
  • (转)socket Aio demo
  • (转载)从 Java 代码到 Java 堆
  • .NetCore Flurl.Http 升级到4.0后 https 无法建立SSL连接
  • .net经典笔试题
  • .NET微信公众号开发-2.0创建自定义菜单