SQL进阶之旅 Day 20:锁与并发控制技巧

news2025/6/8 23:33:02

【JDK21深度解密 Day 20】锁与并发控制技巧

文章简述

在高并发的数据库环境中,锁与并发控制是保障数据一致性和系统稳定性的核心机制。本文作为“SQL进阶之旅”系列的第20天,深入探讨SQL中的锁机制、事务隔离级别以及并发控制策略。文章从理论基础入手,结合MySQL和PostgreSQL的实现差异,详细讲解了行级锁、表级锁、死锁预防等关键技术点,并通过实际业务场景分析,提供可执行的SQL代码示例及性能对比测试。无论你是数据库开发工程师还是后端开发者,掌握这些内容都将显著提升你在高并发系统中处理数据冲突的能力。


理论基础

1. 什么是锁?

锁(Lock)是数据库管理系统用于管理多个事务对共享资源(如数据行、表等)访问的一种机制。其主要目的是确保在多用户并发操作时,数据的一致性与完整性。

2. 锁的类型

行级锁(Row-Level Locking)
  • 特点:锁定单个数据行,适用于高并发写入场景。
  • 优点:减少锁冲突,提高并发性能。
  • 缺点:管理开销较大。
  • 适用数据库:MySQL InnoDB、PostgreSQL(默认使用行级锁)。
表级锁(Table-Level Locking)
  • 特点:锁定整张表,通常用于只读或批量操作。
  • 优点:实现简单,开销小。
  • 缺点:限制并发性,可能导致性能瓶颈。
  • 适用数据库:MySQL MyISAM、某些旧版本的Oracle。
页级锁(Page-Level Locking)
  • 特点:锁定一个数据页,介于行级和表级之间。
  • 常见于:部分数据库引擎(如SQL Server)。

3. 事务隔离级别

事务隔离级别决定了事务在并发执行时如何相互影响。常见的四种隔离级别如下:

隔离级别脏读不可重复读幻读
Read Uncommitted
Read Committed
Repeatable Read
Serializable
  • Read Committed 是大多数数据库的默认隔离级别。
  • Repeatable Read 在MySQL中默认为InnoDB的隔离级别,但可能产生幻读问题。
  • Serializable 是最严格的隔离级别,牺牲性能换取一致性。

4. 死锁(Deadlock)

当两个或多个事务互相等待对方释放资源时,就会发生死锁。数据库系统通常会检测并自动回滚其中一个事务以解除死锁。


适用场景

以下是一些典型的需要锁与并发控制的业务场景:

场景一:库存扣减系统

在电商系统中,用户下单时需同时更新商品库存和订单状态。如果多个用户同时请求同一商品,必须保证库存不会被超卖。

场景二:银行转账系统

当A向B转账时,必须确保账户余额的原子性和一致性,防止因并发操作导致的数据错误。

场景三:日志记录系统

在高并发下,多个线程同时写入日志表,若不加锁,可能会出现日志丢失或重复插入的问题。


代码实践

示例一:使用 SELECT ... FOR UPDATE 实现行级锁

-- 创建测试表
CREATE TABLE inventory (
    product_id INT PRIMARY KEY,
    stock INT NOT NULL
);

-- 插入测试数据
INSERT INTO inventory (product_id, stock) VALUES (1, 100);

-- 开启事务
START TRANSACTION;

-- 查询并锁定该行
SELECT * FROM inventory WHERE product_id = 1 FOR UPDATE;

-- 修改库存(模拟扣减)
UPDATE inventory SET stock = stock - 1 WHERE product_id = 1;

-- 提交事务
COMMIT;

注释:

  • FOR UPDATE 是MySQL InnoDB中用于获取行级锁的关键字。
  • 在PostgreSQL中,可以使用 SELECT ... FOR UPDATESELECT ... SKIP LOCKED 来实现类似功能。

示例二:使用 BEGIN; ... COMMIT; 控制事务边界

-- 开始事务
BEGIN;

-- 扣减库存
UPDATE inventory SET stock = stock - 1 WHERE product_id = 1;

-- 记录日志
INSERT INTO logs (action, description) VALUES ('stock_decrease', 'Product 1 decreased by 1');

-- 提交事务
COMMIT;

注释:

  • 使用显式事务控制,确保操作的原子性。
  • 如果中间发生异常,可以通过 ROLLBACK; 回滚事务。

示例三:避免死锁的实践方法

-- 事务A
START TRANSACTION;
UPDATE orders SET status = 'paid' WHERE order_id = 1001;
UPDATE inventory SET stock = stock - 1 WHERE product_id = 1;
COMMIT;

-- 事务B
START TRANSACTION;
UPDATE inventory SET stock = stock - 1 WHERE product_id = 1;
UPDATE orders SET status = 'paid' WHERE order_id = 1001;
COMMIT;

注释:

  • 上述两个事务如果同时执行,可能造成死锁。
  • 建议统一按相同顺序更新资源,避免循环依赖。

执行原理

MySQL InnoDB 的锁机制

  • InnoDB 使用 意向锁(Intention Locks) 来表示事务对表的意图(如读或写)。
  • 行级锁由 锁管理器(Lock Manager) 维护,每个锁对象包含锁类型、事务ID、等待队列等信息。
  • 当事务尝试获取锁失败时,会进入等待队列,直到锁被释放或超时。

PostgreSQL 的锁机制

  • PostgreSQL 支持 行级锁(Row Share/Exclusive)表级锁(Share/Access Exclusive)
  • 默认使用 MVCC(Multi-Version Concurrency Control) 技术来实现无锁并发控制。
  • SELECT ... FOR UPDATE 会阻塞其他事务对该行的修改,直到当前事务提交或回滚。

性能测试

我们使用MySQL 8.0和PostgreSQL 14进行性能对比测试,测试环境为本地虚拟机,数据量约为10万条记录。

测试表结构

CREATE TABLE test_table (
    id INT PRIMARY KEY AUTO_INCREMENT,
    name VARCHAR(100),
    value INT
);

-- 插入10万条测试数据
INSERT INTO test_table (name, value)
SELECT CONCAT('Test', LPAD(seq, 5, '0')), FLOOR(RAND() * 1000)
FROM (
    WITH RECURSIVE seq AS (
        SELECT 1 AS n
        UNION ALL
        SELECT n + 1 FROM seq WHERE n < 100000
    )
    SELECT * FROM seq
) AS seq;

测试用例一:未加锁的并发更新

-- 事务A
START TRANSACTION;
UPDATE test_table SET value = value + 1 WHERE id BETWEEN 1 AND 1000;
COMMIT;

-- 事务B
START TRANSACTION;
UPDATE test_table SET value = value + 1 WHERE id BETWEEN 1 AND 1000;
COMMIT;
测试项MySQL 8.0PostgreSQL 14
平均耗时(ms)600550
数据一致性

测试用例二:加锁后的并发更新

-- 事务A
START TRANSACTION;
SELECT * FROM test_table WHERE id BETWEEN 1 AND 1000 FOR UPDATE;
UPDATE test_table SET value = value + 1 WHERE id BETWEEN 1 AND 1000;
COMMIT;

-- 事务B
START TRANSACTION;
SELECT * FROM test_table WHERE id BETWEEN 1 AND 1000 FOR UPDATE;
UPDATE test_table SET value = value + 1 WHERE id BETWEEN 1 AND 1000;
COMMIT;
测试项MySQL 8.0PostgreSQL 14
平均耗时(ms)12001100
数据一致性

注释:

  • 加锁后虽然耗时增加,但数据一致性得到保障。
  • PostgreSQL的MVCC机制在高并发下表现更优。

最佳实践

1. 合理选择锁类型

  • 对于高并发写入场景,优先使用 行级锁
  • 对于批量读取或只读操作,使用 表级锁 可减少锁竞争。

2. 控制事务范围

  • 尽量保持事务 短小精悍,避免长时间持有锁。
  • 避免在事务中执行复杂查询或外部调用,以免增加锁等待时间。

3. 避免死锁

  • 按固定顺序访问资源,避免循环依赖。
  • 使用 SET lock_timeout = '5s'; 设置锁等待超时时间,防止事务无限等待。

4. 使用 MVCC 优化并发

  • PostgreSQL 的 MVCC 机制减少了锁的使用,适合高并发写入场景。
  • MySQL 的 InnoDB 也支持类似机制,但在某些情况下仍需显式加锁。

5. 监控锁等待和死锁

  • 使用 SHOW ENGINE INNODB STATUS\G 查看锁等待和死锁信息。
  • 在PostgreSQL中,可通过 pg_locks 系统视图监控锁状态。

案例分析

案例背景

某电商平台在促销期间出现了大量库存超卖的情况。系统在高并发下频繁出现“库存不足”却仍然扣减库存的现象。

问题分析

  • 由于没有使用行级锁,多个事务同时读取库存值并进行更新,导致最终结果不一致。
  • 缺乏事务控制,无法保证操作的原子性。

解决方案

  1. 使用 SELECT ... FOR UPDATE 锁定库存行
  2. 使用事务包裹整个操作流程
  3. 增加库存检查逻辑

优化后的SQL

-- 开始事务
START TRANSACTION;

-- 获取并锁定库存
SELECT stock FROM inventory WHERE product_id = 1 FOR UPDATE;

-- 检查库存是否足够
IF @stock >= 1 THEN
    UPDATE inventory SET stock = stock - 1 WHERE product_id = 1;
    INSERT INTO orders (product_id, quantity) VALUES (1, 1);
END IF;

-- 提交事务
COMMIT;

注释:

  • 通过锁定行并检查库存,确保扣减操作的正确性。
  • 使用事务保证操作的原子性。

总结

本篇文章围绕“锁与并发控制”这一关键主题展开,从理论到实践全面解析了SQL中的锁机制、事务隔离级别以及并发控制策略。通过具体代码示例和性能测试,展示了不同锁类型对系统性能和数据一致性的影响。结合实际案例,进一步说明了如何在高并发场景下有效避免数据冲突和死锁问题。

在接下来的Day 21中,我们将深入探讨“临时表与内存表应用”,了解如何利用内存表优化查询性能,提升系统响应速度。敬请期待!


核心技能总结

技能点应用场景实际价值
行级锁与表级锁高并发写入、批量操作减少锁冲突,提升并发性能
事务控制数据一致性要求高的场景保证操作的原子性和一致性
死锁预防多事务交互场景避免系统阻塞,提高稳定性
MVCC机制高并发读写场景降低锁开销,提升吞吐量
锁等待监控生产环境故障排查快速定位并发瓶颈,优化系统性能

文章标签

sql, database, concurrency, locking, transaction, mysql, postgresql, performance, optimization, advanced-sql


进一步学习参考资料

  1. MySQL官方文档 - InnoDB Locking
  2. PostgreSQL官方文档 - Locking
  3. 《高性能MySQL》第三版 - 第10章 锁定
  4. Database Systems Concepts - Concurrency Control
  5. CSDN技术专栏 - SQL锁与并发控制实战

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2404701.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

美业破局:AI智能体如何用数据重塑战略决策(5/6)

摘要&#xff1a;文章深入剖析美业现状与挑战&#xff0c;指出其市场规模庞大但竞争激烈&#xff0c;面临获客难、成本高、服务标准化缺失等问题。随后阐述 AI 智能体与数据驱动决策的概念&#xff0c;强调其在美业管理中的重要性。接着详细说明 AI 智能体在美业数据收集、整理…

生成模型+两种机器学习范式

生成模型&#xff1a;从数据分布到样本创造 生成模型&#xff08;Generative Model&#xff09; 是机器学习中一类能够学习数据整体概率分布&#xff0c;并生成新样本的模型。其核心目标是建模输入数据 x 和标签 y 的联合概率分布 P(x,y)&#xff0c;即回答 “数据是如何产生的…

【学习笔记】Python金融基础

Python金融入门 1. 加载数据与可视化1.1. 加载数据1.2. 折线图1.3. 重采样1.4. K线图 / 蜡烛图1.5. 挑战1 2. 计算2.1. 收益 / 回报2.2. 绘制收益图2.3. 累积收益2.4. 波动率2.5. 挑战2 3. 滚动窗口3.1. 创建移动平均线3.2. 绘制移动平均线3.3 Challenge 4. 技术分析4.1. OBV4.…

A Execllent Software Project Review and Solutions

The Phoenix Projec: how do we produce software? how many steps? how many people? how much money? you will get it. i am a pretty judge of people…a prank

windows命令行面板升级Git版本

Date: 2025-06-05 11:41:56 author: lijianzhan Git 是一个 ‌分布式版本控制系统‌ (DVCS)&#xff0c;由 Linux 之父 Linus Torvalds 于 2005 年开发&#xff0c;用于管理 Linux 内核开发。它彻底改变了代码协作和版本管理的方式&#xff0c;现已成为软件开发的事实标准工具&…

大故障,阿里云核心域名疑似被劫持

2025年6月5日凌晨&#xff0c;阿里云多个服务突发异常&#xff0c;罪魁祸首居然是它自家的“核心域名”——aliyuncs.com。包括对象存储 OSS、内容分发 CDN、镜像仓库 ACR、云解析 DNS 等服务在内&#xff0c;全部受到波及&#xff0c;用户业务连夜“塌房”。 更让人惊讶的是&…

SQLMesh实战:用虚拟数据环境和自动化测试重新定义数据工程

在数据工程领域&#xff0c;软件工程实践&#xff08;如版本控制、测试、CI/CD&#xff09;的引入已成为趋势。尽管像 dbt 这样的工具已经推动了数据建模的标准化&#xff0c;但在测试自动化、工作流管理等方面仍存在不足。 SQLMesh 应运而生&#xff0c;旨在填补这些空白&…

设计模式基础概念(行为模式):模板方法模式 (Template Method)

概述 模板方法模式是一种行为设计模式&#xff0c; 它在超类中定义了一个算法的框架&#xff0c; 允许子类在不修改结构的情况下重写算法的特定步骤。 是基于继承的代码复用的基本技术&#xff0c;模板方法模式的类结构图中&#xff0c;只有继承关系。 需要开发抽象类和具体子…

传统业务对接AI-AI编程框架-Rasa的业务应用实战(番外篇2)-- Rasa 训练数据文件的清理

经过我的【传统业务对接AI-AI编程框架-Rasa的业务应用实战】系列 1-6 的表述 已经实现了最初的目标&#xff1a;将传统平台业务&#xff08;如发票开具、审核、计税、回款等&#xff09;与智能交互结合&#xff0c;通过用户输入提示词或语音&#xff0c;识别用户意图和实体信…

LVDS的几个关键电压概念

LVDS的几个关键电压概念 1.LVDS的直流偏置 直流偏置指的是信号的电压围绕的基准电压&#xff0c;信号的中心电压。在LVDS中&#xff0c;信号是差分的&#xff0c; 两根线之间的电压差表示数据&#xff0c;很多时候两根线的电压不是在0v开始变化的&#xff0c;而是在某个 固定的…

2023年ASOC SCI2区TOP,随机跟随蚁群优化算法RFACO,深度解析+性能实测

目录 1.摘要2.连续蚁群优化算法ACOR3.随机跟随策略4.结果展示5.参考文献6.代码获取7.算法辅导应用定制读者交流 1.摘要 连续蚁群优化是一种基于群体的启发式搜索算法&#xff08;ACOR&#xff09;&#xff0c;其灵感来源于蚁群的路径寻找行为&#xff0c;具有结构简单、控制参…

DLL动态库实现文件遍历功能(Windows编程)

源文件&#xff1a; 文件遍历功能的动态库&#xff0c;并支持用户注册回调函数处理遍历到的文件 a8f80ba 周不才/cpp_linux study - Gitee.com 知识准备 1.Windows中的数据类型 2.DLL导出/导入宏 使用__declspec(dllexport)修饰函数&#xff0c;将函数标记为导出函数存放到…

jvm 垃圾收集算法 详解

垃圾收集算法 分代收集理论 垃圾收集器的理论基础&#xff0c;它建立在两个分代假说之上&#xff1a; 弱分代假说&#xff1a;绝大多数对象都是朝生夕灭的。强分代假说&#xff1a;熬过越多次垃圾收集过程的对象就越难以消亡。 这两个分代假说共同奠定了多款常用的垃圾收集…

[特殊字符] 深入理解 Linux 内核进程管理:架构、核心函数与调度机制

Linux 内核作为一个多任务操作系统&#xff0c;其进程管理子系统是核心组成部分之一。无论是用户应用的运行、驱动行为的触发&#xff0c;还是系统调度决策&#xff0c;几乎所有操作都离不开进程的创建、调度与销毁。本文将从进程的概念出发&#xff0c;深入探讨 Linux 内核中进…

Flutter:下拉框选择

![在这里插入图片描述](https://i-blog.csdnimg.cn/direct/d4 b70dec92594838a8b2c130717938aa.png) 文档地址dropdown_button2 // 限价、市价 状态final List<String> orderTypes [普通委托, 市价委托];String? selectedOrderType 普通委托;changeOrderType(String …

SpringAI(GA):Nacos2下的分布式MCP

原文链接地址&#xff1a;SpringAI(GA)&#xff1a;Nacos2下的分布式MCP 教程说明 说明&#xff1a;本教程将采用2025年5月20日正式的GA版&#xff0c;给出如下内容 核心功能模块的快速上手教程核心功能模块的源码级解读Spring ai alibaba增强的快速上手教程 源码级解读 版…

[AI绘画]sd学习记录(二)文生图参数进阶

目录 7.高分辨率修复&#xff1a;以小博大8.细化器&#xff08;Refiner&#xff09;&#xff1a;两模型接力9.随机数种子&#xff08;Seed&#xff09;&#xff1a;复现图片吧 本文接续https://blog.csdn.net/qq_23220445/article/details/148460878?spm1001.2014.3001.5501…

CRM管理系统中的客户分类与标签管理技巧:提升转化率的核心策略

在客户关系管理(CRM)领域&#xff0c;有效的客户分类与标签管理是提升销售效率、优化营销ROI的关键。据统计&#xff0c;使用CRM管理系统进行科学客户分层的企业&#xff0c;客户转化率平均提升35%(企销客数据)。本文将深入解析在CRM管理软件中实施客户分类与标签管理的最佳实践…

怎么解决cesium加载模型太黑,程序崩溃,不显示,位置不对模型太大,Cesium加载gltf/glb模型后变暗

有时候咱们cesium加载模型时候型太黑&#xff0c;程序崩溃&#xff0c;不显示&#xff0c;位置不对模型太大怎么办 需要处理 可以联系Q:424081801 谢谢 需要处理 可以联系Q:424081801 谢谢

【AI系列】BM25 与向量检索

博客目录 引言&#xff1a;信息检索技术的演进第一部分&#xff1a;BM25 算法详解第二部分&#xff1a;向量检索技术解析第三部分&#xff1a;BM25 与向量检索的对比分析第四部分&#xff1a;融合与创新&#xff1a;混合检索系统 引言&#xff1a;信息检索技术的演进 在信息爆…