SQL进阶之旅 Day 20:锁与并发控制技巧

【JDK21深度解密 Day 20】锁与并发控制技巧

文章简述

在高并发的数据库环境中,锁与并发控制是保障数据一致性和系统稳定性的核心机制。本文作为“SQL进阶之旅”系列的第20天,深入探讨SQL中的锁机制、事务隔离级别以及并发控制策略。文章从理论基础入手,结合MySQL和PostgreSQL的实现差异,详细讲解了行级锁、表级锁、死锁预防等关键技术点,并通过实际业务场景分析,提供可执行的SQL代码示例及性能对比测试。无论你是数据库开发工程师还是后端开发者,掌握这些内容都将显著提升你在高并发系统中处理数据冲突的能力。


理论基础

1. 什么是锁?

锁(Lock)是数据库管理系统用于管理多个事务对共享资源(如数据行、表等)访问的一种机制。其主要目的是确保在多用户并发操作时,数据的一致性与完整性。

2. 锁的类型

行级锁(Row-Level Locking)
  • 特点:锁定单个数据行,适用于高并发写入场景。
  • 优点:减少锁冲突,提高并发性能。
  • 缺点:管理开销较大。
  • 适用数据库:MySQL InnoDB、PostgreSQL(默认使用行级锁)。
表级锁(Table-Level Locking)
  • 特点:锁定整张表,通常用于只读或批量操作。
  • 优点:实现简单,开销小。
  • 缺点:限制并发性,可能导致性能瓶颈。
  • 适用数据库:MySQL MyISAM、某些旧版本的Oracle。
页级锁(Page-Level Locking)
  • 特点:锁定一个数据页,介于行级和表级之间。
  • 常见于:部分数据库引擎(如SQL Server)。

3. 事务隔离级别

事务隔离级别决定了事务在并发执行时如何相互影响。常见的四种隔离级别如下:

隔离级别脏读不可重复读幻读
Read Uncommitted
Read Committed
Repeatable Read
Serializable
  • Read Committed 是大多数数据库的默认隔离级别。
  • Repeatable Read 在MySQL中默认为InnoDB的隔离级别,但可能产生幻读问题。
  • Serializable 是最严格的隔离级别,牺牲性能换取一致性。

4. 死锁(Deadlock)

当两个或多个事务互相等待对方释放资源时,就会发生死锁。数据库系统通常会检测并自动回滚其中一个事务以解除死锁。


适用场景

以下是一些典型的需要锁与并发控制的业务场景:

场景一:库存扣减系统

在电商系统中,用户下单时需同时更新商品库存和订单状态。如果多个用户同时请求同一商品,必须保证库存不会被超卖。

场景二:银行转账系统

当A向B转账时,必须确保账户余额的原子性和一致性,防止因并发操作导致的数据错误。

场景三:日志记录系统

在高并发下,多个线程同时写入日志表,若不加锁,可能会出现日志丢失或重复插入的问题。


代码实践

示例一:使用 SELECT ... FOR UPDATE 实现行级锁

-- 创建测试表
CREATE TABLE inventory (product_id INT PRIMARY KEY,stock INT NOT NULL
);-- 插入测试数据
INSERT INTO inventory (product_id, stock) VALUES (1, 100);-- 开启事务
START TRANSACTION;-- 查询并锁定该行
SELECT * FROM inventory WHERE product_id = 1 FOR UPDATE;-- 修改库存(模拟扣减)
UPDATE inventory SET stock = stock - 1 WHERE product_id = 1;-- 提交事务
COMMIT;

注释:

  • FOR UPDATE 是MySQL InnoDB中用于获取行级锁的关键字。
  • 在PostgreSQL中,可以使用 SELECT ... FOR UPDATESELECT ... SKIP LOCKED 来实现类似功能。

示例二:使用 BEGIN; ... COMMIT; 控制事务边界

-- 开始事务
BEGIN;-- 扣减库存
UPDATE inventory SET stock = stock - 1 WHERE product_id = 1;-- 记录日志
INSERT INTO logs (action, description) VALUES ('stock_decrease', 'Product 1 decreased by 1');-- 提交事务
COMMIT;

注释:

  • 使用显式事务控制,确保操作的原子性。
  • 如果中间发生异常,可以通过 ROLLBACK; 回滚事务。

示例三:避免死锁的实践方法

-- 事务A
START TRANSACTION;
UPDATE orders SET status = 'paid' WHERE order_id = 1001;
UPDATE inventory SET stock = stock - 1 WHERE product_id = 1;
COMMIT;-- 事务B
START TRANSACTION;
UPDATE inventory SET stock = stock - 1 WHERE product_id = 1;
UPDATE orders SET status = 'paid' WHERE order_id = 1001;
COMMIT;

注释:

  • 上述两个事务如果同时执行,可能造成死锁。
  • 建议统一按相同顺序更新资源,避免循环依赖。

执行原理

MySQL InnoDB 的锁机制

  • InnoDB 使用 意向锁(Intention Locks) 来表示事务对表的意图(如读或写)。
  • 行级锁由 锁管理器(Lock Manager) 维护,每个锁对象包含锁类型、事务ID、等待队列等信息。
  • 当事务尝试获取锁失败时,会进入等待队列,直到锁被释放或超时。

PostgreSQL 的锁机制

  • PostgreSQL 支持 行级锁(Row Share/Exclusive)表级锁(Share/Access Exclusive)
  • 默认使用 MVCC(Multi-Version Concurrency Control) 技术来实现无锁并发控制。
  • SELECT ... FOR UPDATE 会阻塞其他事务对该行的修改,直到当前事务提交或回滚。

性能测试

我们使用MySQL 8.0和PostgreSQL 14进行性能对比测试,测试环境为本地虚拟机,数据量约为10万条记录。

测试表结构

CREATE TABLE test_table (id INT PRIMARY KEY AUTO_INCREMENT,name VARCHAR(100),value INT
);-- 插入10万条测试数据
INSERT INTO test_table (name, value)
SELECT CONCAT('Test', LPAD(seq, 5, '0')), FLOOR(RAND() * 1000)
FROM (WITH RECURSIVE seq AS (SELECT 1 AS nUNION ALLSELECT n + 1 FROM seq WHERE n < 100000)SELECT * FROM seq
) AS seq;

测试用例一:未加锁的并发更新

-- 事务A
START TRANSACTION;
UPDATE test_table SET value = value + 1 WHERE id BETWEEN 1 AND 1000;
COMMIT;-- 事务B
START TRANSACTION;
UPDATE test_table SET value = value + 1 WHERE id BETWEEN 1 AND 1000;
COMMIT;
测试项MySQL 8.0PostgreSQL 14
平均耗时(ms)600550
数据一致性

测试用例二:加锁后的并发更新

-- 事务A
START TRANSACTION;
SELECT * FROM test_table WHERE id BETWEEN 1 AND 1000 FOR UPDATE;
UPDATE test_table SET value = value + 1 WHERE id BETWEEN 1 AND 1000;
COMMIT;-- 事务B
START TRANSACTION;
SELECT * FROM test_table WHERE id BETWEEN 1 AND 1000 FOR UPDATE;
UPDATE test_table SET value = value + 1 WHERE id BETWEEN 1 AND 1000;
COMMIT;
测试项MySQL 8.0PostgreSQL 14
平均耗时(ms)12001100
数据一致性

注释:

  • 加锁后虽然耗时增加,但数据一致性得到保障。
  • PostgreSQL的MVCC机制在高并发下表现更优。

最佳实践

1. 合理选择锁类型

  • 对于高并发写入场景,优先使用 行级锁
  • 对于批量读取或只读操作,使用 表级锁 可减少锁竞争。

2. 控制事务范围

  • 尽量保持事务 短小精悍,避免长时间持有锁。
  • 避免在事务中执行复杂查询或外部调用,以免增加锁等待时间。

3. 避免死锁

  • 按固定顺序访问资源,避免循环依赖。
  • 使用 SET lock_timeout = '5s'; 设置锁等待超时时间,防止事务无限等待。

4. 使用 MVCC 优化并发

  • PostgreSQL 的 MVCC 机制减少了锁的使用,适合高并发写入场景。
  • MySQL 的 InnoDB 也支持类似机制,但在某些情况下仍需显式加锁。

5. 监控锁等待和死锁

  • 使用 SHOW ENGINE INNODB STATUS\G 查看锁等待和死锁信息。
  • 在PostgreSQL中,可通过 pg_locks 系统视图监控锁状态。

案例分析

案例背景

某电商平台在促销期间出现了大量库存超卖的情况。系统在高并发下频繁出现“库存不足”却仍然扣减库存的现象。

问题分析

  • 由于没有使用行级锁,多个事务同时读取库存值并进行更新,导致最终结果不一致。
  • 缺乏事务控制,无法保证操作的原子性。

解决方案

  1. 使用 SELECT ... FOR UPDATE 锁定库存行
  2. 使用事务包裹整个操作流程
  3. 增加库存检查逻辑

优化后的SQL

-- 开始事务
START TRANSACTION;-- 获取并锁定库存
SELECT stock FROM inventory WHERE product_id = 1 FOR UPDATE;-- 检查库存是否足够
IF @stock >= 1 THENUPDATE inventory SET stock = stock - 1 WHERE product_id = 1;INSERT INTO orders (product_id, quantity) VALUES (1, 1);
END IF;-- 提交事务
COMMIT;

注释:

  • 通过锁定行并检查库存,确保扣减操作的正确性。
  • 使用事务保证操作的原子性。

总结

本篇文章围绕“锁与并发控制”这一关键主题展开,从理论到实践全面解析了SQL中的锁机制、事务隔离级别以及并发控制策略。通过具体代码示例和性能测试,展示了不同锁类型对系统性能和数据一致性的影响。结合实际案例,进一步说明了如何在高并发场景下有效避免数据冲突和死锁问题。

在接下来的Day 21中,我们将深入探讨“临时表与内存表应用”,了解如何利用内存表优化查询性能,提升系统响应速度。敬请期待!


核心技能总结

技能点应用场景实际价值
行级锁与表级锁高并发写入、批量操作减少锁冲突,提升并发性能
事务控制数据一致性要求高的场景保证操作的原子性和一致性
死锁预防多事务交互场景避免系统阻塞,提高稳定性
MVCC机制高并发读写场景降低锁开销,提升吞吐量
锁等待监控生产环境故障排查快速定位并发瓶颈,优化系统性能

文章标签

sql, database, concurrency, locking, transaction, mysql, postgresql, performance, optimization, advanced-sql


进一步学习参考资料

  1. MySQL官方文档 - InnoDB Locking
  2. PostgreSQL官方文档 - Locking
  3. 《高性能MySQL》第三版 - 第10章 锁定
  4. Database Systems Concepts - Concurrency Control
  5. CSDN技术专栏 - SQL锁与并发控制实战

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.pswp.cn/pingmian/83916.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

Qt(part 2)1、Qwindow(菜单栏,工具栏,状态栏),铆接部件,核心部件 ,2、添加资源文件 3、对话框

1、Qwindow tips&#xff1a;1&#xff0c;首先为什么创建出的对象基本都是指针形式&#xff0c;个人觉得是对象树的原因&#xff08;自动释放内存&#xff09;&#xff0c;指针来访问成员函数->的形式。2&#xff0c;菜单栏只能一个的&#xff0c;放窗口基本Set&#xff0c…

一款“短小精悍的”手机录屏软件

这个时代&#xff0c;手机自带录屏功能已经不是什么稀奇的事情了&#xff0c;但是手机自带的录屏功能不都是完美的&#xff0c;无法静音录屏、、不能修改画质、不能剪辑、不能自定义水印......emmm.....貌似除了录屏就什么都不会 今天分享的这款软件——ADV屏幕录制汉化版&…

力扣HOT100之二分查找:153. 寻找旋转排序数组中的最小值

这道题是上一道题&#xff1a;33. 搜索旋转排序数组的前置题&#xff0c;有点没看懂力扣为什么要这样安排题目顺序&#xff0c;应该把这道题按排在前面才对啊。。。这道题的思路已经在上一道题的思路中说过了&#xff0c;这里就直接复制粘贴上一篇博客中的内容了。 我们阅读完题…

libiec61850 mms协议异步模式

之前项目中使用到libiec61850库&#xff0c;都是服务端开发。这次新的需求要接收服务端的遥测数据&#xff0c;这就涉及到客户端开发了。 客户端开发没搞过啊&#xff0c;挑战不少&#xff0c;但是人不就是通过战胜困难才成长的嘛。通过查看libiec61850的客户端API发现&#xf…

【 知你所想 】基于ernie-x1-turbo推理模型实现趣味猜心游戏

&#x1f31f; 项目特点 &#x1f916; 智能AI&#xff1a;基于文心一言大模型&#xff0c;具有强大的推理能力&#x1f3af; 实时思考&#xff1a;展示AI的思考过程&#xff0c;让你了解AI是如何推理的&#x1f3ae; 互动性强&#xff1a;通过简单的"是/否"问答&…

Excel 模拟分析之单变量求解简单应用

正向求解 利用公式根据贷款总额、还款期限、贷款利率&#xff0c;求每月还款金额 反向求解 根据每月还款能力&#xff0c;求最大能承受贷款金额 参数&#xff1a; 目标单元格&#xff1a;求的值所在的单元格 目标值&#xff1a;想要达到的预期值 可变单元格&#xff1a;变…

关于easyexcel动态下拉选问题处理

前些日子突然碰到一个问题&#xff0c;说是客户的导入文件模版想支持部分导入内容的下拉选&#xff0c;于是我就找了easyexcel官网寻找解决方案&#xff0c;并没有找到合适的方案&#xff0c;没办法只能自己动手并分享出来&#xff0c;针对Java生成Excel下拉菜单时因选项过多导…

【Qt】之【Get√】【Bug】通过值捕获(或 const 引用捕获)传进 lambda,会默认复制成 const

通过值捕获&#xff08;或 const 引用捕获&#xff09;传进 lambda&#xff0c;会默认复制成 const。 背景 匿名函数外部定义 QSet<QString> nameSet,需要传入匿名函数使用修改 connect(dlg, ..., [nameSet](...) {nameSet.insert(name); // ❌ 这里其实是 const QSet…

css元素的after制作斜向的删除线

<div class"price_div"></div>.price_div{position: relative; } ::after{content: ;position: absolute;left: 0;top: 50%;width: 100%;height: 2px;background: #FF186B;transform: rotate(-5deg); }

uniapp map组件的基础与实践

UniApp 中的 map 组件用于在应用中展示地图,并且支持在地图上添加标记、绘制线条和多边形等功能。以下是一些基本用法: 1. 基本结构 首先,确保你在页面的 .vue 文件中引入了 map 组件。以下是创建一个简单地图的基本代码结构: <template><view class="con…

深入理解PHP安全漏洞:文件包含与SSRF攻击全解析

深入理解PHP安全漏洞&#xff1a;文件包含与SSRF攻击全解析 前言 在Web安全领域&#xff0c;PHP应用程序的安全问题一直备受关注。本文将深入探讨两种常见的PHP安全漏洞&#xff1a;文件包含漏洞和服务器端请求伪造(SSRF)&#xff0c;帮助开发者理解漏洞原理、利用方式以及防…

MS358A 低功耗运算放大器 车规

MS358A 低功耗运算放大器 车规 产品简述 MS358A 是双通道运算放大器&#xff0c;具有低功耗、宽电源电压范围、高单位增益带宽的特性。在特定情况下&#xff0c;压摆率可以达到0.4V/μs 。每个通道的静态电流 (5V) 只有 430μA 。 MS358A输入共模范围可以到地&#xff0c;同时…

n8n + AI Agent:AI 自动化生成测试用例并支持导出 Excel

n8n + AI Agent:AI 自动化生成测试用例并支持导出 Excel 最终成果展示一、准备工作二、手把手搭建工作流第一步:创建手动触发器 (Chat Trigger)第二步:创建 AI Agent 节点第三步:为 AI Agent 植入 DeepSeek AI 模型第四步:解析AI的响应 (Code)第五步:生成Excel文件 (Conv…

5.1 HarmonyOS NEXT系统级性能调优:内核调度、I/O优化与多线程管理实战

HarmonyOS NEXT系统级性能调优&#xff1a;内核调度、I/O优化与多线程管理实战 在HarmonyOS NEXT的全场景生态中&#xff0c;系统级性能调优是构建流畅、高效应用的关键。通过内核调度精细化控制、存储与网络I/O深度优化&#xff0c;以及多线程资源智能管理&#xff0c;开发者…

​线性注意力 vs. 传统注意力:效率与表达的博弈新解

​核心结论​&#xff1a;线性注意力用计算复杂度降维换取全局建模能力&#xff0c;通过核函数和结构优化补足表达缺陷 一、本质差异&#xff1a;两种注意力如何工作&#xff1f; ​特性​传统注意力&#xff08;Softmax Attention&#xff09;线性注意力&#xff08;Linear At…

github中main与master,master无法合并到main

文章目录 遇到问题背景怎么做 遇到问题 上传 github 时候&#xff0c;发现传上去的是 master&#xff0c;但是 github 竟然还有一个 main 背景 github 采用 main 替代 master 作为主分支不是出于技术背景&#xff0c;而是出于 2020 年全球范围内兴起的 “Black Lives Matter…

使用矩阵乘法+线段树解决区间历史和问题的一种通用解法

文章目录 前言P8868 [NOIP2022] 比赛CF1824DP9990/2020 ICPC EcFinal G 前言 一般解决普通的区间历史和&#xff0c;只需要定义辅助 c h s − t ⋅ a chs-t\cdot a chs−t⋅a&#xff0c; h s hs hs是历史和&#xff0c; a a a是区间和&#xff0c; t t t是时间戳&#xff0c…

RabbitMQ入门4.1.0版本(基于java、SpringBoot操作)

RabbitMQ 一、RabbitMQ概述 RabbitMQ RabbitMQ最初由LShift和CohesiveFT于2007年开发&#xff0c;后来由Pivotal Software Inc.&#xff08;现为VMware子公司&#xff09;接管。RabbitMQ 是一个开源的消息代理和队列服务器&#xff0c;用 Erlang 语言编写。广泛应用于各种分布…

Python Copilot【代码辅助工具】 简介

粉丝爱买鳕鱼肠深海鳕鱼肉鱼肉香肠盼盼麦香鸡味块卡乐比&#xff08;Calbee&#xff09;薯条三兄弟 独立小包美丽雅 奶茶杯一次性饮料杯好时kisses多口味巧克力糖老金磨方【黑金系列】黑芝麻丸郑新初网红郑新初烤鲜牛肉干超人毛球修剪器去球器剃毛器衣服去毛器优惠券宁之春 红黑…

VBA进度条ProgressForm1

上一章《VBA如何使用ProgressBar进度条控件》介绍了ProgressBar控件的使用方法&#xff0c;今天我给大家介绍ProgressForm1进度条的使用方法&#xff0c;ProgressForm1是集成ProgressBar控件和Label控件的窗体&#xff0c;可以同时显示进度条和百分比&#xff0c;如下图&#x…