mysql事务隔离级别如下:
①读取未提交(READ-UNCOMMITTED):最低的隔离级别,允许读取尚未提交的数据变更,可能造成脏读、不可重复读、幻读.
事务的特性:
①原子性:事务最小的执行单位,不允许分割.事务的原子性确保动作要么全部执行,要么全部不执行.
①.、SQL语句执行流程
MySQL大体上可分为Server层和存储引擎层两部分.
Server层:
连接器:TCP握手后服务器来验证登陆用户身份,A用户创建连接后,管理员对A用户权限修改了也不会影响到已经创建的链接权限,必须重新登陆.
分析器:根据语法规则,判断你输入的这个SQL语句是否满足MySQL语法.
优化器:多种执行策略可实现目标,系统自动选择最优进行执行.
执行器:判断是否有权限,将最终任务提交到存储引擎.
存储引擎层
SQL执行顺序
BinLog
BinLog是记录所有数据库表结构变更(例如create、alter table)以及表数据修改(insert、update、delete)的二进制日志,主从数据库同步用到的都是BinLog文件.BinLog日志文件有三种模式.
STATEMENT 模式
内容:binlog 记录可能引起数据变更的 sql 语句
优势:该模式下,因为没有记录实际的数据,所以日志量很少 IO 都消耗很低,性能是最优的
劣势:但有些操作并不是确定的,比如 uuid() 函数会随机产生唯一标识,当依赖 binlog 回放时,该操作生成的数据与原数据必然是不同的,此时可能造成无法预料的后果.
ROW 模式
内容:在该模式下,binlog 会记录每次操作的源数据与修改后的目标数据,StreamSets就要求该模式.
优势:可以绝对精准的还原,从而保证了数据的安全与可靠,并且复制和数据恢复过程可以是并发进行的
劣势:缺点在于 binlog 体积会非常大,同时,对于修改记录多、字段长度大的操作来说,记录时性能消耗会很严重.阅读的时候也需要特殊指令来进行读取数据.
MIXED 模式
内容:是对上述STATEMENT 跟 ROW 两种模式的混合使用.
细节:对于绝大部分操作,都是使用 STATEMENT 来进行 binlog 没有记录,只有以下操作使用 ROW 来实现:表的存储引擎为 NDB,使用了uuid() 等不确定函数,使用了 insert delay 语句,使用了临时表
主从同步流程:
①.、主节点必须启用二进制日志,记录任何修改了数据库数据的事件.
mysql默认的复制方式是异步的,并且复制的时候是有并行复制能力的.主库把日志发送给从库后不管了,这样会产生一个问题就是假设主库挂了,从库处理失败了,这时候从库升为主库后,日志就丢失了.由此产生两个概念.
全同步复制
半同步复制
半同步复制的逻辑是这样,从库写入日志成功后返回ACK确认给主库,主库收到至少一个从库的确认就认为写操作完成.
还可以延伸到由于主从配置不一样、主库大事务、从库压力过大、网络震荡等造成主备延迟,如何避免这个问题?主备切换的时候用可靠性优先原则还是可用性优先原则?如何判断主库Crash了?互为主备的情况下如何避免主备循环复制?被删库跑路了如何正确恢复?( o )... 感觉越来越扯到DBA的活儿上去了.
RedoLog
可以先通过下面demo理解:
饭点记账可以把账单写在账本上也可以写在粉板上.有人赊账或者还账的话,一般有两种做法:
①.、直接把账本翻出来,把这次赊的账加上去或者扣除掉.
生意忙时选后者,因为前者太麻烦了.得在密密麻麻的记录中找到这个人的赊账总额信息,找到之后再拿出算盘计算,最后再将结果写回到账本上.
同样在MySQL中如果每一次的更新操作都需要写进磁盘,然后磁盘也要找到对应的那条记录,然后再更新,整个过程IO成本、查找成本都很高.而粉板和账本配合的整个过程就是MySQL用到的是Write-Ahead Logging 技术,它的关键点就是先写日志,再写磁盘.此时账本 = BinLog,粉板 = RedoLog.
①.、 记录更新时,InnoDB引擎就会先把记录写到RedoLog(粉板)里面,并更新内存.同时,InnoDB引擎会在空闲时将这个操作记录更新到磁盘里面.
RedoLog有write pos 跟checkpoint
check point:是当前要擦除的位置,也是往后推移并且循环的,擦除记录前要把记录更新到数据文件.
write pos和check point之间的是粉板上还空着的部分,可以用来记录新的操作.如果write pos追上checkpoint,表示粉板满了,这时候不能再执行新的更新,得停下来先擦掉一些记录,把checkpoint推进一下.
有了redo log,InnoDB就可以保证即使数据库发生异常重启,之前提交的记录都不会丢失,这个能力称为crash-safe. redolog两阶段提交:为了让binlog跟redolog两份日志之间的逻辑一致.提交流程大致如下:
binlog跟redolog区别:
redo log是InnoDB引擎特有的;binlog是MySQL的Server层实现的,所有引擎都可以使用.
redo log是循环写的,空间固定会用完;binlog是可以追加写入的.追加写是指binlog文件写到一定大小后会切换到下一个,并不会覆盖以前的日志.
UndoLog
UndoLog 一般是逻辑日志,主要分为两种:
insert undo log
代表事务在insert新记录时产生的undo log, 只在事务回滚时需要,并且在事务提交后可以被立即丢弃
update undo log
事务在进行update或delete时产生的undo log; 不仅在事务回滚时需要,在快照读时也需要;所以不能随便删除,只有在快速读或事务回滚不涉及该日志时,对应的日志才会被purge线程统一清除
索引的常见模型有哈希表、有序数组和搜索树.
哈希表:一种以KV存储数据的结构,只适合等值查询,不适合范围查询.
有序数组:只适用于静态存储引擎,涉及到插入的时候比较麻烦.可以参考Java中的ArrayList.
搜索树:按照数据结构中的二叉树来存储数据,不过此时是N叉树(B+树).广泛应用在存储引擎层中.
B+树比B树优势在于:
B+ 树非叶子节点存储的只是索引,可以存储的更多.B+树比B树更加矮胖,IO次数更少.
B+ 树叶子节点前后管理,更加方便范围查询.同时结果都在叶子节点,查询效率稳定.
B+树中更有利于对数据扫描,可以避免B树的回溯扫描.
索引的优点:
①.、唯一索引可以保证每一行数据的唯一性
索引的缺点:
①.、创建跟维护都需要耗时
索引设计的原则不应该:
①.、索引不是越多越好.索引太多,维护索引需要时间跟空间.
应该:
①.、重复率小的列建议生成索引.因为重复数据少,索引树查询更有效率,等价基数越大越好.
索引失效的场景
①.、模糊搜索:左模糊或全模糊都会导致索引失效,比如'%a'和'%a%'.但是右模糊是可以利用索引的,比如'a%' .
关于索引的知识点:
主键索引:主键索引的叶子节点存的是整行数据信息.在InnoDB里,主键索引也被称为聚簇索引(clustered index).主键自增是无法保证完全自增的哦,遇到唯一键冲突、事务回滚等都可能导致不连续.
唯一索引:以唯一列生成的索引,该列不允许有重复值,但允许有空值(NULL)
change buffer:普通索引用在更新过程的加速,更新的字段如果在缓存中,如果是普通索引则直接更新即可.如果是唯一索引需要将所有数据读入内存来确保不违背唯一性,所以尽量用普通索引.
非主键索引:非主键索引的叶子节点内容是主键的值.在InnoDB里,非主键索引也被称为二级索引(secondary index)
回表:先通过数据库索引扫描出数据所在的行,再通过行主键id取出索引中未提供的数据,即基于非主键索引的查询需要多扫描一棵索引树.
覆盖索引:如果一个索引包含(或者说覆盖)所有需要查询的字段的值,我们就称之为覆盖索引.
最左前缀原则:对多个字段同时建立的组合索引(有顺序,ABC,ACB是完全不同的两种联合索引) 以联合索引(a,b,c)为例,建立这样的索引相当于建立了索引a、ab、abc三个索引.另外组合索引实际还是一个索引,并非真的创建了多个索引,只是产生的效果等价于产生多个索引.
索引维护:B+树为了维护索引有序性涉及到页分裂跟页合并.增删数据时需考虑页空间利用率.
自增主键:一般会建立与业务无关的自增主键,不会触发叶子节点分裂.
延迟关联:通过使用覆盖索引查询返回需要的主键,再根据主键关联原表获得需要的数据.
InnoDB存储: * .frm文件是一份定义文件,也就是定义数据库表是一张怎么样的表.*.ibd文件则是该表的索引,数据存储文件,既该表的所有索引树,所有行记录数据都存储在该文件中.
MyISAM存储:* .frm文件是一份定义文件,也就是定义数据库表是一张怎么样的表.* .MYD文件是MyISAM存储引擎表的所有行数据的文件.* .MYI文件存放的是MyISAM存储引擎表的索引相关数据的文件.MyISAM引擎下,表数据和表索引数据是分开存储的.
MyISAM查询:在MyISAM下,主键索引和辅助键索引都属于非聚簇索引.查询不管是走主键索引,还是非主键索引,在叶子结点得到的都是目的数据的地址,还需要通过该地址,才能在数据文件中找到目的数据.
PS:InnoDB支持聚簇索引,MyISAM不支持聚簇索引
ACID的四个特性
原子性(Atomicity):把多个操作放到一个事务中,保证这些操作要么都成功,要么都不成功
一致性(Consistency):理解成一串对数据进行操作的程序执行下来,不会对数据产生不好的影响,比如凭空产生,或消失
持久性(Durability):当某个操作操作完毕了,那么结果就是这样了,并且这个操作会持久化到日志记录中
PS:ACID中C与CAP定理中C的区别
ACID的C着重强调单数据库事务操作时,要保证数据的完整和正确性,数据不会凭空消失跟增加.CAP 理论中的C指的是对一个数据多个备份的读写一致性
事务操作可能会出现的数据问题
①.、脏读(dirty read):B事务更改数据还未提交,A事务已经看到并且用了.B事务如果回滚,则A事务做错了
在说隔离级别之前,你首先要知道,你隔离得越严实,效率就会越低.所以呢很多时候,我们都要在二者之间寻找一个平衡点.SQL标准的事务隔离级别由低到高如下: 上图从上到下的模式会导致系统的并行性能依次降低,安全性依次提高.
读未提交:别人改数据的事务尚未提交,我在我的事务中也能读到.
读已提交(Oracle默认):别人改数据的事务已经提交,我在我的事务中才能读到.
可重复读(MySQL默认):别人改数据的事务已经提交,我在我的事务中也不去读,以此保证重复读一致性.
串行:我的事务尚未提交,别人就别想改数据.
标准跟实现:上面都是关于事务的标准,但是每一种数据库都有不同的实现,比如MySQL InnDB 默认为RR级别,但是不会出现幻读.因为当事务A更新了所有记录的某个字段,此时事务A会获得对这个表的表锁,因为事务A还没有提交,所以事务A获得的锁没有释放,此时事务B在该表插入新记录,会因为无法获得该表的锁,则导致插入操作被阻塞.只有事务A提交了事务后,释放了锁,事务B才能进行接下去的操作.所以可以说 MySQL的RR级别的隔离是已经实现解决了脏读,不可重复读和幻读的.
无论是Java的并发编程还是数据库的并发操作都会涉及到锁,研发人员引入了悲观锁跟乐观锁这样一种锁的设计思想.
悲观锁:
优点:适合在写多读少的并发环境中使用,虽然无法维持非常高的性能,但是在乐观锁无法提更好的性能前提下,可以做到数据的安全性
缺点:加锁会增加系统开销,虽然能保证数据的安全,但数据处理吞吐量低,不适合在读书写少的场合下使用
乐观锁:
优点:在读多写少的并发场景下,可以避免数据库加锁的开销,提高DAO层的响应性能,很多情况下ORM工具都有带有乐观锁的实现,所以这些方法不一定需要我们人为的去实现.
缺点:在写多读少的并发场景下,即在写操作竞争激烈的情况下,会导致CAS多次重试,冲突频率过高,导致开销比悲观锁更高.
实现:数据库层面的乐观锁其实跟CAS思想类似, 通数据版本号或者时间戳也可以实现.
数据库并发场景主要有三种:
读-读:不存在任何问题,也不需要并发控制
读-写:有隔离性问题,可能遇到脏读,幻读,不可重复读
写-写:可能存更新丢失问题,比如第一类更新丢失,第二类更新丢失
两类更新丢失问题:
第一类更新丢失:事务A的事务回滚覆盖了事务B已提交的结果 第二类更新丢失:事务A的提交覆盖了事务B已提交的结果
为了合理贯彻落实锁的思想,MySQL中引入了杂七杂八的各种锁:
锁分类
MySQL支持三种层级的锁定,分别为
表级锁定
MySQL中锁定粒度最大的一种锁,最常使用的MYISAM与INNODB都支持表级锁定.
页级锁定
是MySQL中锁定粒度介于行级锁和表级锁中间的一种锁,表级锁速度快,但冲突多,行级冲突少,但速度慢.所以取了折衷的页级,一次锁定相邻的一组记录.
行级锁定
Mysql中锁定粒度最细的一种锁,表示只针对当前操作的行进行加锁.行级锁能大大减少数据库操作的冲突.其加锁粒度最小,但加锁的开销也最大行级锁不一定比表级锁要好:锁的粒度越细,代价越高,相比表级锁在表的头部直接加锁,行级锁还要扫描找到对应的行对其上锁,这样的代价其实是比较高的,所以表锁和行锁各有所长.
MyISAM中的锁
虽然MySQL支持表,页,行三级锁定,但MyISAM存储引擎只支持表锁.所以MyISAM的加锁相对比较开销低,但数据操作的并发性能相对就不高.但如果写操作都是尾插入,那还是可以支持一定程度的读写并发
从MyISAM所支持的锁中也可以看出,MyISAM是一个支持读读并发,但不支持通用读写并发,写写并发的数据库引擎,所以它更适合用于读多写少的应用场合,一般工程中也用的较少.
InnoDB中的锁
该模式下支持的锁实在是太多了,具体如下:
共享锁和排他锁 (Shared and Exclusive Locks)
意向锁(Intention Locks)
记录锁(Record Locks)
间隙锁(Gap Locks)
临键锁 (Next-Key Locks)
插入意向锁(Insert Intention Locks)
主键自增锁 (AUTO-INC Locks)
空间索引断言锁(Predicate Locks for Spatial Indexes)
举个栗子,比如行锁里的共享锁跟排它锁:lock in share modle 共享读锁:
为了确保自己查到的数据没有被其他的事务正在修改,也就是说确保查到的数据是最新的数据,并且不允许其他人来修改数据.但是自己不一定能够修改数据,因为有可能其他的事务也对这些数据使用了 in share mode 的方式上了S 锁.如果不及时的commit 或者rollback 也可能会造成大量的事务等待.
for update排它写锁:
为了让自己查到的数据确保是最新数据,并且查到后的数据只允许自己来修改的时候,需要用到for update.相当于一个 update 语句.在业务繁忙的情况下,如果事务没有及时的commit或者rollback 可能会造成其他事务长时间的等待,从而影响数据库的并发使用效率.
Gap Lock间隙锁:
①.、行锁只能锁住行,如果在记录之间的间隙插入数据就无法解决了,所以呢MySQL引入了间隙锁(Gap Lock).间隙锁是左右开区间.间隙锁之间不会冲突.
间隙锁加锁原则(学完忘那种):
①.、加锁的基本单位是 NextKeyLock,是前开后闭区间.
①.、原子性:在整个操作的事务中,要么全部成功,要么全部失败.
①.、原子性(Atomicity)原子性是指事务包含的所有操作要么全部成功,要么全部失败回滚,所以呢事务的操作如果成功就必须要完全应用到数据库,如果操作失败则不能对数据库有任何影响.
扩展资料
但是会占用和数据量成正比的内存空间.并且其内容会在MySQL重新启动时丢失Merge将一定数量的MyISAM表联合而成一个整体,在超大规模数据存储时很有用Archive非常适合存储大量的独立的,作为历史记录的数据.
因为它们不经常被读取.Archive拥有高效的插入速度,但其对查询的支持相对较差Federated将不同的MySQL服务器联合起来,逻辑上组成一个完整的数据库.非常适合分布式应用Cluster/NDB高冗余的存储引擎,用多台数据机器联合提供服务以提高整体性能和安全性.适合数据量大,安全和性能要求高的应用
以上就是土嘎嘎小编为大家整理的mysql怎么保证原子性相关主题介绍,如果您觉得小编更新的文章只要能对粉丝们有用,就是我们最大的鼓励和动力,不要忘记讲本站分享给您身边的朋友哦!!