合肥工程建设交易中心网站,国际新闻最新消息今天军事新闻,网站编程代码,建筑设计网站模板一、前言
CURD 不加控制#xff0c;会有什么问题#xff1f; CURD 满足什么属性#xff0c;能解决上述问题#xff1f; 买票的过程得是原子的。买票应该不能受互相的影响。买完票应该要永久有效。买前和买后都要是确定的状态。 什么是事务#xff1f; 事务就是一组 DML…一、前言
CURD 不加控制会有什么问题 CURD 满足什么属性能解决上述问题 买票的过程得是原子的。买票应该不能受互相的影响。买完票应该要永久有效。买前和买后都要是确定的状态。 什么是事务 事务就是一组 DML 语句组成这些语句在逻辑上存在相关性这一组 DML 语句要么全部成功要么全部失败是一个整体。MySQL 提供一种机制保证我们达到这样的效果。事务还规定不同的客户端看到的数据是不相同的。 事务就是要做的或所做的事情主要用于处理操作量大、复杂度高的数据。假设一种场景你毕业了学校的教务系统后台 MySQL 中不再需要你的数据要删除你的所有有关信息一般不会那么要删除你的基本信息姓名、电话、籍贯等的同时也删除和你有关的其他信息比如你的各科成绩你的在校表现甚至你在论坛发过的帖子、文章等。这样就需要多条 MySQL 语句构成那么所有这些操作合起来就构成了一个事务。 正如上面所说一个 MySQL 数据库可不止你一个事务在运行同一时刻甚至有大量的请求被包装成事务再向 MySQL 服务器发起事务处理请求。而每条事务至少一条 SQL最多很多 SQL这样如果大家都访问同样的表数据在不加保护的情况下就绝对会出现问题。甚至因为事务由多条 SQL 构成那么也会存在执行到一半出错或者不想再执行的情况那么已经执行的怎么办呢 一个完整的事务绝对不是简单的 sql 集合还需要满足如下四个属性 原子性一个事务transaction中的所有操作要么全部完成要么全部不完成不会结束在中间某个环节。事务在执行过程中发生错误会被回滚Rollback到事务开始前的状态就像这个事务从来没有执行过一样。 一致性在事务开始之前和事务结束以后数据库的完整性没有被破坏。这表示写入的资料必须完全符合所有的预设规则这包含资料的精确度、串联性以及后续数据库可以自发性地完成预定的工作。 隔离性数据库允许多个并发事务同时对其数据进行读写和修改的能力隔离性可以防止多个事务并发执行时由于交叉执行而导致数据的不一致。事务隔离分为不同级别包括读未提交Read uncommitted、读提交read committed、可重复读repeatable read和串行化Serializable 。持久性事务处理结束后对数据的修改就是永久的即便系统故障也不会丢失。 上面四个属性可以简称为 ACID 。 原子性Atomicity或称不可分割性 一致性Consistency 隔离性Isolation又称独立性 持久性Durability 为什么会出现事务 事务被 MySQL 编写者设计出来 本质是为了当应用程序访问数据库时 事务能够简化我们的编程模型 不需要我们去考虑各种各样的潜在错误和并发问题。 可以想一下当我们使用事务时 要么提交 要么回滚 我们不会去考虑网络异常了 服务器宕机了 同时更改一个数据该怎么办。 因此事务本质上是 为了应用层服务 的。 而不是伴随着数据库系统天生就有的。 提示我们后面把 MySQL 中的一行信息称为一行记录。 二、事务的版本支持 在 MySQL 中只有使用了 Innodb 数据库引擎的数据库或表才支持事务 MyISAM 不支持。 1、查看数据库引擎
1表格显示 2 行显示 三、事务提交方式
1、事务的提交方式
常见的事务的提交方式有两种 自动提交 手动提交 2、查看事务提交方式 用 set 来改变 MySQL 的自动提交模式 四、事务常见操作方式
1、练习 —— 简单银行用户表
1提前准备 Centos 7 云服务器默认开启 3306 mysqld 服务 使用 Win cmd 远程访问 Centos 7 云服务器mysqld 服务需要 Win 上也安装了 MySQL这里看到结果即可 注意使用本地 MySQL 客户端可能看不到链接效果本地可能使用域间套接字查不到链接。
C:\Users\whbmysql -uroot -p -h42.192.83.143
Enter password: ***********
Welcome to the MySQL monitor. Commands end with ; or \g.
Your MySQL connection id is 3484
Server version: 5.7.33 MySQL Community Server (GPL)Copyright (c) 2000, 2019, Oracle and/or its affiliates. All rights reserved.Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.Type help; or \h for help. Type \c to clear the current input statement. 使用 netstat 查看链接情况可知MySQL 本质是一个客户端进程 为了便于演示我们将 MySQL 的默认隔离级别设置成读未提交。 2创建测试表 3正常演示 —— 证明事务的开始与回滚 4非正常演示
A. 证明未 commit客户端崩溃MySQL 自动会回滚隔离级别设置为读未提交
终端 A 终端 B B. 证明 commit 了客户端崩溃MySQL 数据不会在受影响已经持久化
终端 A 终端 B C. 对比试验。证明 begin 操作会自动更改提交方式不会受 MySQL 是否自动提交影响
终端 A 终端 B D. 证明单条 SQL 与事务的关系 a. 实验一 终端 A 终端 B b. 实验二 终端 A 终端 B 2、结论 只要输入 begin / start transaction事务便必须要通过 commit 提交才会持久化与是否设置 set autocommit 无关。 事务可以手动回滚同时当操作异常MySQL 会自动回滚。对于 InnoDB 每一条 SQL 语言都默认封装成事务自动提交。select 有特殊情况因为 MySQL 有 MVCC 从上面的例子我们能看到事务本身的原子性回滚持久性commit。 3、事务操作注意事项 如果没有设置保存点也可以回滚但只能回滚到事务的开始。直接使用 rollback前提是事务还没有提交。如果一个事务被提交了commit则不可以回退rollback。可以选择回退到哪个保存点。InnoDB 支持事务 MyISAM 不支持事务。开始事务可以用 start transaction / begin。 五、事务隔离级别
1、如何理解隔离性 MySQL 服务可能会同时被多个客户端进程线程访问访问的方式以事务方式进行。 一个事务可能由多条 SQL 构成也就意味着任何一个事务都有执行前、执行中、执行后的阶段。而所谓的原子性其实就是让用户层要么看到执行前要么看到执行后执行中出现问题可以随时回滚。所以单个事务对用户表现出来的特性就是原子性。 但毕竟所有事务都要有个执行过程那么在多个事务各自执行多个 SQL 时就还是有可能会出现互相影响的情况。比如多个事务同时访问同一张表甚至同一行数据。 假设你妈妈给你说你要么别学要学就学到最好。至于你怎么学中间有什么困难你的妈妈并不关心。那么你的学习对于你妈妈来说就是原子的。那么你的学习过程很容易受别人干扰此时就需要将你的学习隔离开以保证你的学习环境是健康的。 在数据库中为了保证事务执行过程中尽量不受干扰就有了一个重要特征隔离性。在数据库中允许事务受不同程度的干扰就有了一种重要特征隔离级别。 2、隔离级别 读未提交【Read Uncommitted】在该隔离级别所有的事务都可以看到其他事务没有提交的执行结果。实际生产中不可能使用这种隔离级别的但相当于没有任何隔离性也会有很多并发问题如脏读、幻读、不可重复读等我们前面为了做实验方便用的就是这个隔离性。 读提交【Read Committed】该隔离级别是大多数据库的默认的隔离级别不是 MySQL 默认的。它满足了隔离的简单定义一个事务只能看到其他的已经提交的事务所做的改变。这种隔离级别会引起不可重复读即一个事务执行时如果多次 select可能得到不同的结果。 可重复读【Repeatable Read】这是 MySQL 默认的隔离级别它确保同一个事务在执行中多次读取操作数据时会看到同样的数据行但是会出现幻读问题。 串行化【Serializable】这是事务的最高隔离级别它通过强制事务排序使之不可能相互冲突从而解决了幻读的问题。它在每个读的数据行上面加上共享锁但可能会导致超时和锁竞争这种隔离级别太极端实际生产基本不使用。 隔离级别如何实现隔离基本都是通过锁实现的不同的隔离级别锁的使用是不同的。常见的有表锁、行锁、读锁、写锁、间隙锁GAP、Next-Key 锁 GAP 行锁 等。不过我们目前现有这个认识就行先关注上层使用。 3、查看与设置隔离性
1查看 2设置
设置当前会话 / 全局隔离级别 set [session | global] transaction isolation level {read uncommitted | read committed | repeatable read | serializable} ; 注意改变当前会话隔离级别重启不受影响。但改变全局隔离级别的话重启之后默认值会发生改变。 设置当前会话隔离性另起一个会话看不多只影响当前会话 串行化 set session transaction isolation level serializable; 设置全局隔离性另起一个会话会被影响 set global transaction isolation level read uncommitted; 注意如果没有现象关闭 M ySQL 客户端重新连接。 4、读未提交【Read Uncommitted】 几乎没有加锁虽然效率高但是问题太多严重不建议采用。 终端 A 终端 B 一个事务在执行中读到另一个执行中事务的更新或其他操作但是未 commit 的数据这种现象叫做脏读dirty read。 5、 读提交【Read Committed】
终端 A 终端 B 终端 B 进行第 2 次 select * from account 之前此时还在当前事务中并未 commit 那么就造成了在同一个事务内进行同样的读取在不同的时间段 依旧还在事务操作中) 读取到了不同的值这种现象叫做不可重复读 non reapeatable read 6、可重复读【Repeatable Read】
终端 A 终端 B 在终端 B commit 之前可以看到 事务无论什么时候进行查找看到的结果都是一致的这叫做可重复读。 如果将上面的终端 A 中的 update 操作改成 insert 操作会有什么问题
终端 A 终端 B select * from account; 多次查看发现终端 A 在对应事务中 insert 的数据在终端 B 的事务周期中也没有什么影响也符合可重复的特点。但一般的数据库在可重复读情况的时候无法屏蔽其他事务 insert 的数据。 为什么 因为隔离性实现是对数据加锁完成的而 insert 待插入的数据因为并不存在那么一般加锁无法屏蔽这类问题 会造成虽然大部分内容是可重复读的但是 insert 的数据在可重复读情况被读取出来导致多次查找时会多查找出来新的记录就如同产生了幻觉。这种现象叫做幻读phantom read 。 很明显 MySQL 在 RR 级别的时候是解决了幻读问题的 解决的方式是用 Next-Key 锁 GAP 行锁 解决的。 7、串行化【serializable】 对所有操作全部加锁进行串行化不会有问题但是只要串行化效率就很低几乎完全不会被采用。 终端 A 终端 B 8、总结 其中隔离级别越严格安全性越高但数据库的并发性能也就越低往往需要在两者之间找一个平衡点。 不可重复读的重点是修改和删除同样的条件, 你读取过的数据,再次读取出来发现值不一样了 幻读的重点在于新增同样的条件在第 1 次和第 2 次读出来的记录数不一样。说明MySQL 默认的隔离级别是可重复读一般情况下不要修改。上面的例子可以看出事务也有长短事务这样的概念。事务间互相影响指的是事务在并行执行的时候即都没有 commit 的时候影响会比较大。 六、一致性Consistency 事务执行的结果必须使数据库从一个一致性状态变到另一个一致性状态。当数据库只包含事务成功提交的结果时数据库处于一致性状态。如果系统运行发生中断某个事务尚未完成而被迫中断而改未完成的事务对数据库所做的修改已被写入数据库此时数据库就处于一种不正确不一致的状态。因此一致性是通过原子性来保证的。 其实一致性和用户的业务逻辑强相关一般 MySQL 提供技术支持但是一致性还是要用户业务逻辑做支撑也就是一致性是由用户决定的。而技术上通过 AID 保证 C。 七、扩展学习了解 如何实现事务的隔离性-CSDN博客 Innodb 中的事务隔离级别和锁的关系-CSDN博客 Mysql 间隙锁原理以及 Repeatable Read 隔离级别下可以防止幻读原理-CSDN博客 在 RR 级别的时候多个事务的 update多个事务的 insert多个事务的 delete是否会有加锁现象 现象结果是 update insert delete 之间是会有加锁现象的但是 select 和这些操作是不冲突的。这就是通过读写锁锁有行锁 / 表锁 MVCC 完成隔离性。 八、如何理解隔离性深度
数据库并发的场景有三种 读-读 不存在任何问题也不需要并发控制。读-写 有线程安全问题可能会造成事务隔离性问题可能遇到脏读、幻读、不可重复读。写-写 有线程安全问题可能会存在更新丢失问题比如第一类更新丢失第二类更新丢失后面补充。 1、读-写 多版本并发控制 MVCC 是一种用来解决 读-写冲突 的 无锁并发控制。 为事务分配单向增长的事务 ID为每个修改保存一个版本版本与事务 ID 关联读操作只读该事务开始前的数据库的快照。 所以 MVCC 可以为数据库解决以下问题 在并发读写数据库时可以做到在读操作时不用阻塞写操作写操作也不用阻塞读操作提高了数据库并发读写的性能。同时还可以解决脏读、幻读、不可重复读等事务隔离问题但不能解决更新丢失问题。 每个事务都要有自己的事务 ID可以根据事务 ID 的大小来决定事务到来的先后顺序。mysqld 可能会面临处理多个事务的情况事务也有自己的生命周期mysqld 要对多个事务进行管理先描述再组织。事务在我看来mysqld 中一定是对应的一个或者一套结构体对象 / 类对象事务也要有自己的结构体。 理解 MVCC 需要知道三个前提知识 3 个记录隐藏字段 undo 日志 Read View 13 个记录隐藏列字段 DB_TRX_ID6 byte最近修改修改 / 插入事务 ID记录创建这条记录 / 最后一次修改该记录的事务 ID。DB_ROLL_PTR7 byte回滚指针指向这条记录的上一个版本简单理解成指向历史版本就行这些数据一般在 undo log 中。DB_ROW_ID6 byte隐含的自增 ID隐藏主键如果数据表没有主键InnoDB 会自动以 DB_ROW_ID 产生一个聚簇索引。 补充实际还有一个删除 flag 隐藏字段既记录被更新或删除并不代表真的删除而是删除 flag 变了 假设测试表结构是 上面描述的意思是 目前并不知道创建该记录的事务 ID 隐式主键我们就默认设置 成 null 1 。第一条记录也没有其他版本我们设置回滚指针为 null 。 2undo 日志 MySQL 将来是以服务进程的方式在内存中运行。 之前所学的所有机制索引、事务、隔离性、日志等都是在内存中完成的即在 MySQL 内部的相关缓冲区中保存相关数据完成各种判断操作。然后在合适的时候将相关数据刷新到磁盘当中的。 所以理解 undo log 简单理解成就是 MySQL 中的一段 内存缓冲区 用来保存日志数据的就行。 3模拟 MVCC 现在有一个事务 10 对 student 表中记录进行修改 update 将 name( 张三 ) 改成 name( 李四 ) 。 事务 10 因为要修改所以要先给该记录加行锁。 修改前现将改行记录拷贝到 undo log 中。所以undo log 中就有了一行副本数据。原理就是写时拷贝所以现在 MySQL 中有两行同样的记录。现在修改原始记录中的 name改成 李四并且修改原始记录的隐藏字段 DB_TRX_ID 为当前 事务 10 的 ID我们默认从 10 开始之后递增。而原始记录的回滚指针 DB_ROLL_PTR 列里面写入 undo log 中副本数据的地址从而指向副本记录表示我的上一个版本就是它。 事务 10 提交释放锁。 此时最新的记录是 李四 那条记录 现在又有一个事务 11 对 student 表中记录进行修改 update 将 age(28) 改成 age(38) 。 事务 11 因为也要修改所以要先给该记录加行锁。修改前现将改行记录拷贝到 undo log 中。所以undo log 中就又有了一行副本数据。此时新的副本我们采用头插方式插入 undo log。 现在修改原始记录中的 age 改成 38并且修改原始记录的隐藏字段 DB_TRX_ID 为当前事务 11 的 ID。而原始记录的回滚指针 DB_ROLL_PTR 列里面写入 undo log 中副本数据的地址从而指向副本记录既表示我的上一个版本就是它。 事务11提交释放锁。 这样就有了一个基于链表记录的历史版本链。所谓的回滚无非就是用历史数据覆盖当前数据。 上面的一个个版本我们可以称之为一个个的 快照 。 【思考】 上面是以更新upadte主讲的如果是 delete 呢 一样的别忘了删数据不是清空而是设置 flag 为删除即可也可以形成版本。 如果是 insert 呢 因为 insert 是插入也就是之前没有数据那么 insert 也就没有历史版本。但是一般为了回滚操作insert 的数据也是要被放入 undo log 中如果当前事务 commit 了那么这个 undo log 的历史 insert 记录就可以被清空了。 总结也就是可以理解成 update 和 delete 可以形成版本链 insert 暂时不考虑。 那么 select 呢 select 不会对数据做任何修改所以为 select 维护多版本没有意义。 此时有个问题就是 select 读取是读取最新的版本呢还是读取历史版本 当前读读取最新的记录就是当前读。增删改都叫做当前读select 也有可能当前读比如select lock in share mode共享锁select for update。快照读读取历史版本一般而言就叫做快照读。这个后面重点讨论 可以看到在多个事务同时删改查时都是当前读是要加锁的。那同时有 select 过来如果也要读取最新版 当前读 那么也就需要加锁这就是串行化。 但如果是快照读读取历史版本的话是不受加锁限制的也就是可以并行执行。换而言之提高了效率即 MVCC 的意义所在。 那么是什么决定了 select 是当前读还是快照读呢 隔离级别。 那为什么要有隔离级别呢 事务都是原子的。所以无论如何事务总有先有后。 但是经过上面的操作可以发现事务从 begin-CURD-commit 是有一个阶段的也就是事务有执行前执行中执行后的阶段。但不管怎么启动多个事务总是有先有后的。 那么多个事务在执行中的 CURD 操作是会交织在一起的。那为了保证事务的 “ 有先有后 ” 是不是应该让不同的事务看到它该看到的内容这就是所谓的隔离性与隔离级别要解决的问题。 先来的事务应不应该看到后来的事务所做的修改呢? 那么如何保证不同的事务看到不同的内容呢也就是如何实现隔离级别 4Read View Read View 就是事务进行 快照读 操作的时候生产的 读视图 Read View 在该事务执行的快照读的那一刻会生成数据库系统当前的一个快照记录并维护系统当前活跃事务的 ID 当每个事务开启时都会被分配一个 ID 这个 ID 是递增的所以最新的事务 ID 值越大 Read View 在 MySQL 源码中 就是一个 类 本质是用来进行可见性判断的。 即当我们某个事务执行快照读的时候对该记录创建一个 Read View 读视图把它比作条件 用来判断当前事务能够看到哪个版本的数据既可能是当前最新的数据也有可能是该行记录的 undo log 里面的某个版本的数据。 下面是简化过的 ReadView 结构
class ReadView {// ...private:// 高水位大于等于这个ID的事务均不可见trx_id_t m_low_limit_id// 低水位小于这个ID的事务均可见trx_id_t m_up_limit_id;// 创建该 Read View 的事务IDtrx_id_t m_creator_trx_id;// 创建视图时的活跃事务id列表ids_t m_ids;// 配合purge标识该视图不需要小于m_low_limit_no的UNDO LOG// 如果其他视图也不需要则可以删除小于m_low_limit_no的UNDO LOGtrx_id_t m_low_limit_no;// 标记视图是否被关闭bool m_closed;// ...
};
m_ids; // 一张列表用来维护Read View生成时刻系统正活跃的事务IDup_limit_id; // 记录m_ids列表中事务ID最小的IDlow_limit_id; // ReadView生成时刻系统尚未分配的下一个事务ID也就是目前已出现过的事务ID的最大值1creator_trx_id; // 创建该ReadView的事务ID 我们在实际读取数据版本链的时候是能读取到每一个版本对应的事务 ID 的即当前记录的 DB_TRX_ID 。 那我们现在手里面有的东西就有当前快照读的 ReadView 和 版本链中的某一个记录的 DB_TRX_ID 。 所以现在的问题就是当前快照读应不应该读到当前版本记录。下图可解决该问题 Read View 是事务可见性的一个类不识事务创建出来就有的而是当这个事务已经存在首次进行快照读时MySQL 形成的。 对应源码策略 如果查到不应该看到当前版本接下来就是遍历下一个版本直到符合条件就可以看到。上面的 readview 是当你进行 select 时会自动形成。 5整体流程
假设当前有条记录 事务操作 事务 4 修改 name( 张三 ) 变成 name( 李四 )。 当 事务 2 对某行数据执行了 快照读 数据库为该行数据生成一个 Read View 读视图。 // 事务2的 Read View
m_ids; // 1, 3
up_limit_id; // 1
low_limit_id; // 415原因ReadView生成时刻系统尚未分配的下一个事务ID
creator_trx_id; // 2
此时版本链是 只有事务 4 修改过该行记录并在事务 2 执行快照读前就提交了事务。 事务 2 在快照读该行记录时会拿该行记录的 DB_TRX_ID 去跟 up_limit_idlow_limit_id 和活 跃事务 ID 列表 (trx_list) 进行比较判断当前事务 2 能看到该记录的版本。 // 事务2的 Read View
m_ids; // 1, 3
up_limit_id; // 1
low_limit_id; // 415原因ReadView生成时刻系统尚未分配的下一个事务ID
creator_trx_id; // 2// 事务4提交的记录对应的事务ID
DB_TRX_ID4// 比较步骤
DB_TRX_ID4 up_limit_id1 ? 不小于下一步
DB_TRX_ID4 low_limit_id(5) ? 不大于下一步
m_ids.contains(DB_TRX_ID) ? 不包含说明事务4不在当前的活跃事务中。// 结论
事务4的更改应该看到。
所以事务2能读到的最新数据记录是事务4所提交的版本而事务4提交的版本也是全局角度上最新的版本 6RR 与 RC 的本质区别 a. 当前读和快照读在 RR 级别下的区别 select * from user lock in share mode 以加共享锁方式进行读取对应的就是当前读。 测试用例1 - 表1 测试用例2 - 表2 用例 1 与用例 2 唯一区别仅仅是表 1 的事务 B 在事务 A 修改 age 前快照读过一次 age 数据。而表 2 的事务 B 在事务 A 修改 age 前没有进行过快照读。 【结论】 事务中快照读的结果是非常依赖该事务首次出现快照读的地方即某个事务中首次出现快照读决定该事务后续快照读结果的能力 delete 也同样如此 【总结 —— RR 与 RC 的本质区别】 正是 Read View 生成时机的不同从而造成 RC 和 RR 级别下快照读的结果的不同。在 RR 级别下的某个事务的对某条记录的第一次快照读会创建一个快照及 Read View 将当前系统活跃的其他事务记录起来。此后在调用快照读时使用的还是同一个 Read View所以只要当前事务在其他事务提交更新之前使用过快照读那么之后的快照读使用的都是同一个 Read View所以对之后的修改不可见。即 RR 级别下快照读生成 Read View 时Read View 会记录此时所有其他活动事务的快照这些事务的修改对于当前事务都是不可见的。而早于 Read View 创建的事务所做的修改均是可见的。而在 RC 级别下的事务中每次快照读都会新生成一个快照和 Read View这就是我们在 RC 级别下的事务中可以看到别的事务提交的更新的原因。总之在 RC 隔离级别下是每个快照读都会生成并获取最新的 Read View而在 RR 隔离级别下则是同一个事务中的第一个快照读才会创建 Read View之后的快照读获取的都是同一个 Read View。 正是 RC 每次快照读都会形成 Read View所以 RC 才会有不可重复读问题。 2、读-读 不讨论。 3、写-写 现阶段直接理解成都是当前读这里不做深究。 4、推荐阅读 【MySQL笔记】正确的理解MySQL的MVCC及实现原理_mysqlmvcc实现原理-CSDN博客 详细分析MySQL事务日志(redo log和undo log) - 骏马金龙 - 博客园 (cnblogs.com) 【MySQL】InnoDB 如何避免脏读和不可重复读_innodb怎么解决脏读-CSDN博客
