13 隔离性

news/2024/9/19 1:05:13/ 标签: oracle, 数据库, mysql, 开发语言, sql

数据库并发的场景

读-读:不存在任何问题,也不需要并发控制
读-写:有线程安全问题,可能会造成事务隔离性问题,可能遇到脏读,幻读,不可重复读
写-写:有线程安全问题,可能存在更新丢失,比如第一类更新丢失,第二类更新丢失

读-写

多版本并发控制(MVCC)是一种用来解决读-写冲突的无锁并发控制

为事务分配单向增长的事务id,为每个修改保存一个版本,版本与事务id关联,读操作只读事务开始以前的数据库的快照。所以MVCC可以为数据库解决以下问题

  • 并发读写时,可以做到读操作时不用阻塞写操作,写操作也不用阻塞读操作,提高并发读写的性能
  • 还可以解决脏读,幻读,不可重复读等事务隔离问题,但不能解决更新丢失问题

理解MVCC需要理解三个前提:

  • 3个记录隐藏字段
  • undo日志
  • Read View

3个记录隐藏字段

  • DB_TRX_ID:6byte,最近修改(修改/插入)事务id,记录创建这条记录/最后一次修改该记录的事务ID
  • DB_ROLL_PTR:7byte,回滚指针,指向这条记录的上一个版本(简单理解成,指向历史版本,这些数据一般在undo log中)
  • DB_ROW_ID:6byte,隐含的自增ID(隐藏主键),如果数据表没有主键,innodb会自动以DB_ROW_ID产生一个聚簇索引
  • 补充:实际还有一个删除flag隐藏字段,既记录被更新或删除并不代表真的删除,而是删除flag变了

假设测试表结构是:

sql>mysql> create table if not exists student(
name varchar(11) not null,
age int not null
);
sql>mysql> insert into student (name, age) values (‘张三’, 28);
Query OK, 1 row affected (0.05 sec)

sql>mysql> select * from student;
在这里插入图片描述
上面描述的意思是:
在这里插入图片描述

我们目前并不知道创建该记录的事务id,隐藏主键,就默认设置成null,1.第一条记录也没有其他的版本,设置回滚指针为null

undo日志

sql>mysql将来以服务进程的方式,在内存中运行。之前所说的所有机制:索引,事务,隔离性,日志等,都是在内存中完成的,即在sql>mysql内部的相关缓冲区中,保存相关数据,完成各种判断操作。在合适的时候,将相关数据刷新到磁盘当中

模拟MVCC

现在有一个事务10(仅仅为了好区分),对student表中记录进行修改(update):将name(张三)改成name(李四)

  • 事务10,因为要修改,所以要先给该记录加行锁
  • 修改前,现将行记录拷贝到undo log中,所以,undo log中就有了一行副本数据(原理是写时拷贝)
  • 所以现在sql>mysql有两行同样的记录。修改原纪录中的name,改成‘李四’。并且修改原始记录的隐藏字段DB_TRX_ID为当前事务10的id,默认从10开始,之后递增。而原始记录的回滚指针DB_ROLLPTR列,里面写入undo log中副本数据的地址,从而指向副本记录,既表示我的上一个版本就是它
  • 事务10提交,释放锁

在这里插入图片描述

备注:此时,最新的记录是‘李四’那条记录
现在又有一个事务11,对student表中记录修改(update):将age(28)改成age(38)

  • 事务11,因为也要修改,所以要先给该记录加行锁
  • 修改前,现将改行记录拷贝到undo log中,所以,undo log中就又有了一行副本数据。此时,新的副本,我们采用头插方式,插入undo log。
  • 现在修改原始记录中的age,改成 38。并且修改原始记录的隐藏字DB_TRX_ID 为当前ID。而原始记录的回滚指针事务11的DB_ROLL_PTR 列,里面写入undo log中副本数据的地址,从而指向副本记录,既表示我的上一个版本就是它。
  • 事务11提交,释放锁。

在这里插入图片描述

这样,就有了一个基于链表记录的历史版本链。所谓的回滚,无非就是用历史数据,覆盖当前数据
上面的一个一个版本,可以称之为一个个的快照

##一些思考

上面是以更新(upadte)主讲的,如果是delete呢?一样的,别忘了,删数据不是清空,而是设置flag为删除即可。也可以形成版本。

如果是insert呢?因为insert是插入,也就是之前没有数据,那么insert也就没有历史版本。但是一般为了回滚操作,insert的数据也是要被放入undo log中,如果当前事务commit了,那么这个undo log 的历史insert记录就可以被清空了。

总结一下,也就是我们可以理解成,updatedelete可以形成版本链,insert暂时不考虑。

那么select呢?

首先,select不会对数据做任何修改,所以,为select维护多版本,没有意义。不过,此时有个问题,
就是:

select读取,是读取最新的版本呢?还是读取历史版本?

当前读:读取最新的记录,就是当前读。增删改,都叫做当前读,select也有可能当前读,比如:select lock in share mode(共享锁), select for update (这个好理解,我们后面不讨论)

快照读:读取历史版本(一般而言),就叫做快照读。(这个我们后面重点讨论)

我们可以看到,在多个事务同时删改查的时候,都是当前读,是要加锁的。那同时有select过来,如果也要读取最新版(当前读),那么也就需要加锁,这就是串行化。
但如果是快照读,读取历史版本的话,是不受加锁限制的。也就是可以并行执行!换言之,提高了效率,即MVCC的意义所在。

那么,是什么决定了,select是当前读,还是快照读呢?隔离级别!

那为什么要有隔离级别呢?
事务都是原子的。所以,无论如何,事务总有先有后。

但是经过上面的操作我们发现,事务从begin->CURD->commit,是有一个阶段的。也就是事务有执行前,执行中,执行后的阶段。但,不管怎么启动多个事务,总是有先有后的。

那么多个事务在执行中,CURD操作是会交织在一起的。那么,为了保证事务的“有先有后”,是不是应该让不同的事务看到它该看到的内容,这就是所谓的隔离性与隔离级别要解决的问题。

先来的事务,应不应该看到后来的事务所做的修改呢?

那么,如何保证,不同的事务看到不同的内容呢?也就是如何实现隔离级别?

1.每个事务都有自己的事务id,可以根据事务id的大小决定事务到来的先后顺序
2.sql>mysqld可能面临处理多个事物的情况,事务有自己的生命周期,要对多个事务管理,事务的结构

Read View

Read View就是事务进行快照读操作的时候生成的读视图(Read View),在该事务执行的快照读的那一刻,会生成数据库系统当前的一个快照,记录并维护系统当前活跃事务的id(当每个事务开启时,都会被分配一个id,这个id是递增的,所以最新的事务,id值越大)

Read View在sql>mysql源码中,就是一个类,本质是用来进行可见性判断的。即当我们某个事物执行快照读的时候,对该记录创建一个Read View读视图,把它必做条件,用来判断当前事务能够看到哪个版本的数据,既可能是当前最新的数据,也有可能是该行记录的undo log里面的某个版本的数据

下面是ReadView 结构,简化一下

class ReadView {// 省略...private:/** 高水位,大于等于这个ID的事务均不可见*/trx_id_t m_low_limit_id/** 低水位:小于这个ID的事务均可见 */trx_id_t m_up_limit_id;/** 创建该 Read View 的事务ID*/trx_id_t m_creator_trx_id;/** 创建视图时的活跃事务id列表*/ids_t m_ids;/** 配合purge,标识该视图不需要小于m_low_limit_no的UNDO LOG,
* 如果其他视图也不需要,则可以删除小于m_low_limit_no的UNDO LOG*/trx_id_t m_low_limit_no;/** 标记视图是否被关闭*/bool m_closed;// 省略...};
m_ids;           
up_limit_id;     
low_limit_id;    
//一张列表,用来维护Read View生成时刻,系统正活跃的事务ID//记录m_ids列表中事务ID最小的ID(没有写错)//ReadView生成时刻系统尚未分配的下一个事务ID,也就是目前已出现过的事务ID的最大值+1(也没有写错)creator_trx_id   //创建该ReadView的事务ID

我们在实际读取数据版本链的时候,是能够读取到每个版本对应的事务id的,即:当前记录的DB_TRX_ID
那么,现在手里有的东西就有,当前快照读的ReadView和版本链中的某一个记录的DB_TRX_ID
所以现在的问题就是,当前快照读,应不应该读到当前版本记录。一张图,解决所有问题

在这里插入图片描述

对应源码策略:
在这里插入图片描述
如果查到不应该看到当前版本,接下来就是遍历下一个版本,直到符合条件,即可以看到。上面的readview是当进行select时,自动形成

整体流程

假设当前有条记录:
在这里插入图片描述
事务操作:
在这里插入图片描述

事务4:修改name(张三)变成name(李四)
当事务2对某行数据执行了快照读,数据库就为该行数据生成一个Read View视图

//事务2的 Read View
m_ids; // 1,3
up_limit_id; // 1
low_limit_id; // 4 + 1 = 5,原因:ReadView生成时刻,系统尚未分配的下一个事务ID
creator_trx_id // 2

此时的版本链是:
在这里插入图片描述
只有事务4修改过该行记录,并在事务2执行快照读前,就提交了事务
在这里插入图片描述

事务2在快照读该行记录的时候,就会拿该行记录的DB_TRX_ID去跟up_limit_id,low_limit_id和活跃事务ID列表(trx_list)比较,判断当前事务2能看到该记录的版本

//事务2的 Read Viewm_ids;           
// 1,3up_limit_id;     
low_limit_id;    
// 1// 4 + 1 = 5,原因:ReadView生成时刻,系统尚未分配的下一个事务IDcreator_trx_id   // 2//事务4提交的记录对应的事务IDDB_TRX_ID=4//比较步骤
DB_TRX_ID(4< up_limit_id(1?  不小于,下一步
DB_TRX_ID(4>= low_limit_id(5) ? 不大于,下一步
m_ids.contains(DB_TRX_ID) ? 不包含,说明,事务4不在当前的活跃事务中。
//结论
故,事务4的更改,应该看到。
所以事务2能读到的最新数据记录是事务4所提交的版本,而事务4提交的版本也是全局角度上最新的版本

RR和RC的本质区别

当前读和快照读在RR级别下的区别

测试下面的代码

select * from user lock in share mode,以加共享锁方式进行读取,对应的就是当前读。

测试表

–设置RR模式下测试
sql>mysql> set global transaction isolation level REPEATABLE READ;
Query OK, 0 rows affected (0.00 sec)

–重启终端
sql>mysql> select @@tx_isolation;
在这里插入图片描述

–依旧用之前的表
create table if not exists account(
id int primary key,
name varchar(50) not null default ‘’,
blance decimal(10,2) not null default 0.0
)ENGINE=InnoDB DEFAULT CHARSET=UTF8;

–插入一条记录,用来测试
sql>mysql> insert into user (id, age, name) values (1, 15,‘黄蓉’);
Query OK, 1 row affected (0.00 sec)

测试用例1-表1
在这里插入图片描述

测试用例2-表2
在这里插入图片描述
用例1与用例2:唯一却别仅仅是表1的事务B在事务A修改age前快照读过一次age数据
而表2的事务B在事务A修改前没有进行过快照读

结论:

  • 事务中快照读的结果非常依赖该事务首次出现快照读的地方,即某个十五中首次出现快照读,决定该事物后续快照读结果的能力
  • delete同样如此

RR与RC的本质区别

正式ReadView生成时机的不停,从而造成RC,RR级别下快照读的结果不同
RR级别下某个实物的对某条记录的第一次快照读会创建一个快照及readview,将当前系统活跃的其他事物记录起来

此后在调用快照读时,还是使用同一个ReadView,所以只要当前事务在其他事物提交更新之前使用过快照读,那么之后的快照读使用的都是同一个ReadView,所以对之后的修改不可见

即RR级别下,快照读生成ReadView时,ReadView会记录此时所有其他活动实物的快照,这写事务的修改对于当前事务都是不可见的。而早于ReadView创建的事务所做的修改都是课件的

而在RC级别下,十五中,每次快照读会新生成一个快照和ReadVoew,这就是RC级别下的事务可以看到别的事务提交的更新的原因

总之在RC隔离级别下,每个快照读都会生成并获取最新的ReadView,而在RR下,同一个事物中的第一个快照读才会创建ReadVoew,之后的快照读获取的都是同一个ReadView

正式RC每次快照读,都会生成Readview,所以,RC才会有不可重复读问题

写-写

现阶段,直接理解为当前读

推荐阅读

关于这块,有很好的文章,推荐大家阅读
https://blog.csdn.net/SnailMann/article/details/94724197
https://www.cnblogs.com/f-ck-need-u/archive/2018/05/08/9010872.html
https://blog.csdn.net/chenghan_yang/article/details/97630626


http://www.ppmy.cn/news/1519323.html

相关文章

VIVO 相机HDR拍照流程拆解

和你一起终身学习&#xff0c;这里是程序员Android 经典好文推荐&#xff0c;通过阅读本文&#xff0c;您将收获以下知识点: HDR 场景下发 3 帧拍照请求HDR 3帧拍照请求帧&#xff08;478,479 480&#xff09;HDR 3帧 result callback帧HDR 算法处理5.算法编解码处理HDR 拍照lo…

SpringMVC接收返回值方法汇总

传统方式 RequestMapping("/param01") public String param01(HttpServletRequest request) throws UnsupportedEncodingException {request.setCharacterEncoding("UTF-8");String id request.getParameter("id");request.setAttribute("…

Linux基础入门 --2 DAY

常见命令 查看硬件信息 查看cpu lscpu cat /proc/cpuinfo 范例&#xff1a; [rootlocalhost ~]# lscpu Architecture: x86_64 CPU op-mode(s): 32-bit, 64-bit Byte Order: Little Endian CPU(s): 8 On-line CPU(s) list: 0-7 Thr…

Scipy||第三章 线性代数 (scipy.linalg)

3.1 矩阵操作的细节 3.1.1 矩阵的创建与基础运算 矩阵在 Scipy 中通常是以 Numpy 的 ndarray 形式表示的&#xff0c;这样便于进行高效的矩阵运算。我们再详细探讨几种常见的矩阵操作。 矩阵相加&#xff1a;矩阵相加要求两个矩阵的形状相同&#xff0c;元素逐个相加。 C A …

离线二维数点

问题&#xff1a;给你一个长度为n的序列&#xff0c;m次询问&#xff0c;每次询问区间[l,r]中小于等于x的元素个数。 对于此种问题&#xff0c;最简单的解法就是扫描线树状数组。这种问题满足离线性质&#xff0c;可以先把询问存下来&#xff0c;我们对原序列扫描&#xff0c;…

安达发|户外设备制造APS排程的多层级BOM订单拉动

户外设备制造行业面临的挑战包括多样化的产品线、复杂的产品开发过程以及市场需求的快速变化。为提高生产效率与市场响应速度&#xff0c;采用高级计划排程的多层级BOM订单拉动策略至关重要。 一、户外设备制造行业概述 - 行业背景&#xff1a;户外设备制造行业主要涉及户外休…

Mac 安装Hadoop教程

1. 引言 本教程旨在介绍在Mac 电脑上安装Hadoop&#xff0c;便于编程开发人员对大数据技术的熟悉和掌握。 2.前提条件 2.1 安装JDK 想要在你的Mac电脑上安装Hadoop&#xff0c;你必须首先安装JDK。具体安装步骤这里就不详细描述了。你可参考Mac 安装JDK8。 2.2 配置ssh环境…

缓存Mybatis一级缓存与二级缓存

缓存 为什么使用缓存 缓存(cache)的作用是为了减去数据库的压力,提高查询性能,缓存实现原理是从数据库中查询出来的对象在使用完后不销毁,而是存储在内存(缓存)中,当再次需要获取对象时,直接从内存(缓存)中提取,不再向数据库执行select语句,从而减少了对数据库的查询次数,因此…

Mac/Linux系统matplotlib中文支持问题

背景 matplotlib是python中最常用的数据可视化分析工具&#xff0c;Mac和Linux系统无中文字体&#xff0c;不支持中文显示&#xff08;希望后续可以改进&#xff09;&#xff0c;需要进行字体的下载和设置才能解决。笔者经过实践&#xff0c;发现Mac系统和Linux系统解决方案略…

Windows系统Nginx下载安装配置 运行错误处理

Nginx是一款轻量级的web 服务器/反向代理 服务器。本篇文章主要是nginx的下载安装&#xff0c;处理运行中遇到的问题&#xff0c;配置反向代理。主要分为两部分&#xff1a;下载安装和配置。 目录 1.下载安装 2.nginx配置反向代理 1.下载安装 nginx官网&#xff1a;nginx: …

PHP软件下载-安装-环境配置

.1.下载 下载地址如下 windows.php.net - /downloads/releases/ 安装包如下. .2.安装 可以在D盘或者E盘的根目录创建一个自定义目录。注意文件夹目录中不能包含中文&#xff0c;不能包含空格等特殊字符。 版本说明&#xff1a; (1)ts表示非线程安全版本。这个安装包还指明了…

基于单片机的水箱水质监测系统设计

本设计基于STM32F103C8T6为核心控制器设计了水质监测系统&#xff0c;选用DS18B20温度传感器对水箱水体温度进行采集&#xff1b;E-201-C PH传感器获取水体PH值&#xff1b;选用TS-300B浊度传感器检测水体浊度&#xff1b;采用YW01液位传感器获取水位&#xff0c;当检测水位低于…

华为云征文|部署电影收藏管理器 Radarr

华为云征文&#xff5c;部署电影收藏管理器 Radarr 一、Flexus云服务器X实例介绍1.1 云服务器介绍1.2 应用场景1.3 性能模式 二、Flexus云服务器X实例配置2.1 重置密码2.2 服务器连接2.3 安全组配置 三、部署 Radarr3.1 Radarr 介绍3.2 Docker 环境搭建3.3 Radarr 部署3.4 Rada…

PowerShell脚本编写:自动化Windows开发工作流程

在现代软件开发中&#xff0c;自动化已经成为提高效率和降低人为错误的重要手段之一。Windows开发者尤其依赖于自动化脚本来简化日常工作流程。PowerShell作为Windows的强大命令行工具和脚本语言&#xff0c;为开发者提供了丰富的功能和灵活性&#xff0c;使得多种开发和管理任…

结构体(2)

有任何不懂的问题可以评论区留言&#xff0c;能力范围内都会一一回答 我们先直接上代码看看结构体的另一种用法 1.匿名结构体 define _CRT_SECURE_NO_WARNINGS #include <stdio.h>//第一个struct struct {char c;int i;double d; }s1;//第二个struct struct {char c;i…

密码管理最佳实践:安全存储与定期更换的艺术

在数字化时代&#xff0c;密码作为我们个人信息与资产安全的第一道防线&#xff0c;其重要性不言而喻。然而&#xff0c;随着网络威胁日益复杂多样&#xff0c;仅仅设置一个强密码已不足以保障安全。良好的密码管理实践&#xff0c;特别是安全存储与定期更换密码&#xff0c;成…

【Python机器学习】NLP词中的数学——向量化

我们将文本转换为基本的数值&#xff0c;虽然只是把它们存储在字典中。我们不使用频率字典来描述文档&#xff0c;而是构建词频向量。在Python中&#xff0c;这可以使用列表来实现&#xff0c;但通常它是一个有序的集合或数组&#xff1a; document_vector[] doc_lengthlen(to…

MATLAB智能优化算法-学习笔记(2)——变邻域搜索算法求解旅行商问题【过程+代码】

旅行商问题 (TSP) 旅行商问题(Traveling Salesman Problem, TSP)是经典的组合优化问题之一。问题的描述是:给定若干个城市以及每对城市之间的距离,一个旅行商需要从某个城市出发,访问每个城市恰好一次,最后回到出发城市,目标是找到一条总距离最短的环路。TSP 是 NP-har…

SQL 注入之 sqlmap 实战

在网络安全领域&#xff0c;SQL 注入攻击一直是一个严重的威胁。为了检测和利用 SQL 注入漏洞&#xff0c;安全人员通常会使用各种工具&#xff0c;其中 sqlmap 是一款非常强大且广泛使用的开源 SQL 注入工具。本文将详细介绍 sqlmap 的实战用法。 一、sqlmap 简介 sqlmap 是一…

安装vmtools管理虚拟机教程

目录 1.什么是vmtools 2.安装教程 2.1删除和安装 2.2文件的复制和粘贴 2.3指令操作 3.检验效果 4.小结 1.什么是vmtools vmtools就是安装之后可以让我们更好的管理我们的虚拟机&#xff1b; 我们可以设置windows和centos共享的文件夹&#xff0c;让该文件夹实现共享&am…