数据库事务

出处： spring事务 1.背景 　　Spring提供了编程式事务和声明式事务，但由于编程性事务的侵入性，开发中普遍会使用Spring的声明式事务，下文中所说的Spring事务也都是指声明式事务。 　　Spring声明式事务底层是建立在AOP的基础上的，其本质就是对方法前后进行拦截，然后在目标方法之前创建或加入一个事务，在执行完目标方法之后根据执行执行情况提交或回滚事务。 　　声明式事务最大的优点就是不需要在业务逻辑代码中掺杂事务管理的代码，Spring事务提供两种事务管理方式：基于注解和基于XML配置，我们只需要简单的配置即可使用。 　　相比于编程式事务，由于声明式事务是基于AOP实现的，所以只能实现对方法的粗粒度的控制，而无法做到代码块级别的细粒度控制。 　　Spring事务包括5中参数，分别是：传播行为，隔离级别，是否只读，事务超时时间，回滚规则 　　本文分析下5种事务参数，然后对具体的传播行为给出Demo，以此给出其“细粒度”的事务实现。 2.Spring事务的5种参数 2.1 传播行为 　　传播行为定义了关于客户端和被调用方法的事务边界，Spring中定义了7中传播行为。 对嵌套事务的理解： 　　嵌套是子事务在父事务中执行，子事务是父事务的一部分，在进入子事务之前，父事务建立一个回滚点，叫save point，然后执行子事务，这个子事务也算是父事务的一部分

1. 开篇 相信大家都用过事务以及了解他的特点，如原子性(Atomicity),一致性(Consistency),隔离型(Isolation)以及持久性(Durability)等。今天想跟大家一起研究下事务内部到底是怎么实现的，在讲解前我想先抛出个问题： 事务想要做到什么效果？ 按我理解，无非是要做到可靠性以及并发处理。 可靠性：数据库要保证当insert或update操作时抛异常或者数据库crash的时候需要保障数据的操作前后的一致，想要做到这个，我需要知道我修改之前和修改之后的状态，所以就有了undo log和redo log。 并发处理：也就是说当多个并发请求过来，并且其中有一个请求是对数据修改操作的时候会有影响，为了避免读到脏数据，所以需要对事务之间的读写进行隔离，至于隔离到啥程度得看业务系统的场景了，实现这个就得用MySQL 的隔离级别。 下面我首先讲实现事务功能的三个技术，分别是日志文件(redo log 和 undo log)，锁技术以及MVCC，然后再讲事务的实现原理，包括原子性是怎么实现的，隔离型是怎么实现的等等。最后在做一个总结，希望大家能够耐心看完 redo log与undo log介绍 mysql锁技术以及MVCC基础 事务的实现原理 总结 2. redo log与undo log介绍 2.1 redo log 2.1.1 什么是redo log redo

事务的属性 propagation：用来设置事务的传播行为 事务的传播行为：一个方法运行在了一个开启了事务的方法中，当前方法是使用原来的事务还是开启一个新的事务 Propagation.REQUIRED：默认值，使用原来的事务 Propagation.REQUIRES_NEW：将原来的事务挂起，开启一个新的事务 isolation：用来设置事务的隔离级别 Isolation.REPEATEBLE_READ：可重复读，MySQL默认的隔离级别 Isolation.READ_COMMITTED：读已提交，Oracle默认的隔离级别，开发时通常使用的隔离级别 事务的传播简介 当事务方法被另一个事务方法调用时，必须指定事务应该如何传播。例如：方法可能继承在现有事务中运行，也可能开启一个新事务，并在自己的事务中运行。 事务的传播行为可以由传播属性指定。Spring定义了7种类型的传播行为。 传播属性 描述 REQUIRED （默认） 如果有事务在运行，当前的方法就在这个事务内运行，否则，就启动一个新的事务，并在自己的事务内运行 REQUIRES_NEW 当前的方法必须启动新的事务，并在它自己的事务内运行，如果有事务正在运行，应该将它挂起 SUPPORTS 如果有事务正在运行，当前的方法就在这个事务内运行。否则它可以不运行在事务中 NOT_SUPPORTED 当前的方法不应该运行在事务中

天天用事务，但是你知道MySQL事务的实现原理吗？ 1. 开篇 相信大家都用过事务以及了解他的特点，如原子性(Atomicity),一致性(Consistency),隔离型(Isolation)以及持久性(Durability)等。今天想跟大家一起研究下事务内部到底是怎么实现的，在讲解前我想先抛出个问题： 事务想要做到什么效果？ 按我理解，无非是要做到可靠性以及并发处理。 可靠性：数据库要保证当insert或update操作时抛异常或者数据库crash的时候需要保障数据的操作前后的一致，想要做到这个，我需要知道我修改之前和修改之后的状态，所以就有了undo log和redo log。 并发处理：也就是说当多个并发请求过来，并且其中有一个请求是对数据修改操作的时候会有影响，为了避免读到脏数据，所以需要对事务之间的读写进行隔离，至于隔离到啥程度得看业务系统的场景了，实现这个就得用MySQL 的隔离级别。 下面我首先讲实现事务功能的三个技术，分别是日志文件(redo log 和 undo log)，锁技术以及MVCC，然后再讲事务的实现原理，包括原子性是怎么实现的，隔离型是怎么实现的等等。最后在做一个总结，希望大家能够耐心看完 redo log与undo log介绍 mysql锁技术以及MVCC基础 事务的实现原理 总结 2 redo log 与 undo log介绍 1. redo

1.什么是事务 事务是一条或多条数据库操作语句的组合，具备ACID四个特点。 原子性(Atomicity): 一个事务要么全部执行，要么全部不执行。也就是说一个事务不可能执行到一半就停止了。比如：去超时购买商品，付钱和拿到商品这两步要么同时执行，要么都不执行。 一致性(Consistency): 指事务的运行不会改变数据库中数据的一致性。比如：a+b=10，a改变了，b也应该随之变化。 隔离性(Isolation): 一个事务的执行不能被其他事务干扰。即一个事务内部的操作及使用的数据对并发的其他事务是个例的，并发执行的各个事务之间不能相互干扰。 持久性(Durability): 一个事务一旦提交，它对数据库中数据的改变就应该是永久性的。当事务提交之后，数据会持久化到硬盘，修改是永久性的。 事务并发会发生什么问题？ 脏读 一个事务在执行的过程中读取到了其他事务还没有提交的数据。 不可重复读 事务A在读取一条记录时，这个事务还没有结束，事务B对这个记录进行修改，事务A再次读取这条记录时，记录发生了变化。也就是事务A两次读取到的数据发生了变化成为不可重复读。 幻读 事务A读取表中的数据，事务B在事务A还没有结束时，进行了插入操作，事务A再次读取，发现表中有新的数据，就好像发生了幻觉一样。 事务的隔离级别： 隔离级别分为四种： 读未提交：READ-UNCOMMITTED 读已提交：READ

在应用程序的生命周期中，应尽早建立性能测试意识。 确保应用一切就绪 需要考虑的问题： 应用程序部署后需要支持多少最终用户？6个月后？1年后？3年后呢？ 这些用户分布在哪里？他们是如何与系统建立连接的？ 部署后有多少在线用户、并发用户？6个月后？1年后？3年后呢？ 引申出的问题： 对于每个应用程序，需要多少台服务器？这些服务器的配置是怎么样？是否需要集群？ 我需要提供什么类型的网络基础设施？ 性能测试重点关注的方面： 选择合适的性能测试工具； 设计一个合适的性能测试环境； 设置切合实际的性能测试目标； 确保被测应用程序足够稳定； 安排有足够的时间进行有效的性能测试； 做到代码冻结； 确定和编写关键业务脚本； 提供高质量、足够的测试数据； 确保准确的性能测试设计； 确定监控服务器和网络的关键性指标（KPI）； 安排有足够的时间进行有效的性能测试。 性能测试工具 性能测试工具要求： 协议支持（通信协议）； 认证模式（License）； 概念验证（Proof of concept，简称POC，证明其可行性，示范其原理）； 脚本效果（生成脚本的编辑程度）； 解决方案与负载测试工具（提供解决方案）； 外包性能测试or内部执行。 注意：制定替代方案。 预留足够时间 安排足够的时间确保有效的性能测试。 需要考虑的几个方面： 准备测试环境的时间 准备负载生成器环境 确定及描述业务事务的时间

影响mysql性能的几个方面： 1. 服务器硬件 2. 服务器操作系统 3. 数据库存储引擎 4. 数据库参数配置 5. 数据库结构设计和SQL语句 服务器硬件： 1. CPU： CPU密集型的应用，应选用频率更高的CPU而不是更多的CPU WEB类的应用，CPU核心数量比频率重要 2. 内存： 内存越多越好，内存对读、写都有作用 内存频率越高速度越快，应选择主板支持的最大内存频率，单条容量尽可能大 3. 磁盘： 传统机器硬盘：1.存储容量 2.传输速度 3.访问时间 4.主轴转速 5.物理尺寸 RAID（磁盘冗余阵列）： 1.RAID 0，2块以上的硬盘组成，没有冗余和错误修复能力 2.RAID 1，磁盘镜像，2块硬盘组成，有冗余 3.RAID 5，分布式奇偶性校验阵列，3块以上的硬盘组成，任意一个盘数据失效时可以重建，更多盘数据失效时无法重建 4.RAID 10，分片镜像，RAID 0和RAID 1组合，4块以上的硬盘组成，对比RAID 5重建更简单，速度更快 固态存储SSD或PCI-E卡： 比机械硬盘有更好的随机读写性能 比机械硬盘能更好的支持并发 比机械硬盘更容易损坏 适用于存在大量随机I/O的场景 适用于解决单线程负载的I/O瓶颈 网络存储SAN和NAS： SAN的随机读写慢，不如本地RAID磁盘 NAS设备使用网络连接，通过基于文件的协议如NFS或SMB来访问

一.redo log 使用原因 在 MySQL 里有这个问题，如果每一次的更新操作都需要写进磁盘，然后磁盘也要找到对应的那条记录，然后再更新，整个过程 IO 成本、查找成本都很高 其实就是 MySQL 里经常说到的 WAL 技术，WAL 的全称 是 Write-Ahead Logging，它的关键点就是先写日志，再写磁盘 当有一条记录需要更新的时候，InnoDB 引擎就会先把记录写到 redo log里面，并更新内存，这个时候更新就算完成了。同时，InnoDB 引擎会在适当的时候，将这个操作记录更新到磁盘里面，而这个更新往往是在系统比较空闲的时候做 原理 InnoDB 的 redo log 是固定大小的，比如可以配置为一组 4 个文件，每个文 件的大小是 1GB，那么这块“粉板”总共就可以记录 4GB 的操作。从头开始写，写到末 尾就又回到开头循环写，如上面这个图所示。 write pos 是当前记录的位置，一边写一边后移，写到第 3 号文件末尾后就回到 0 号文件 开头。checkpoint 是当前要擦除的位置，也是往后推移并且循环的，擦除记录前要把记录 更新到数据文件。 write pos 和 checkpoint 之间的是“粉板”上还空着的部分，可以用来记录新的操作。如 果 write pos 追上 checkpoint，表示“粉板”满了，这时候不能再执行新的更新，得停下

原文: 高性能MySQL之锁详解 一、背景 MySQL里面的锁大致可以分成全局锁、表级锁和行锁三类。数据库锁的设计的初衷是处理并发问题。我们知道多用户共享资源的时候，就有可能会出现并发访问的时候，数据库就需要合理的控制资源的访问规则，因此，锁就应运而生了，它主要用来实现这些访问规则的重要数据结构。 二、全局锁 顾名思义，全局锁就是对整个数据库实例加锁，可以通过命令 Flush tables with read lock (FTWRL)对整个数据库实例子加锁。让整个库处于只读状态的时候，可以使用这个命令，之后其他线程的以下语句会被阻塞：数据更新语句（数据的增删改）、数据定义语句（包括建表、修改表结构等）和更新类事务的提交语句。 全局锁有一个经典的使用场景就是做全库逻辑备份，也就是说吧整个数据库的每个表都用select 出来存成文本。以前有一种做法是通过FTWRL确保不会有其他线程对数据库做更新，然后对整个库做备份。注意，在备份过程中整个库完全处于只读状态。 你此时是不是觉得很危险？ 如果你在主库上备份，那么在备份期间都不能执行更新，业务基本上就得停摆； 如果你在从库上备份，那么备份期间从库不能执行主库同步过来的binlog，会导致主从延迟。 看上去确实很危险，但是我们细想一下，备份为什么要加锁呢？如果我们不加锁又会出现什么问题呢？ 假设你现在要维护京东的购买系统

原文: 高性能MySQL之事务 背景 当你手中抓住一件东西不放时，你只能拥有一件东西，如果你肯放手，你就有机会选择更多。与其在别人的生活里跑龙套，不如精彩做自己。人无所舍，必无所成。跌倒了，失去了，不要紧，爬起来继续风雨兼程，且歌且行。 一、概念 事务到底是什么东西呢？想必大家学习的时候也是对事务的概念很模糊的。接下来通过一个经典例子讲解事务。 银行在两个账户之间转账，从A账户转入B账户1000元，系统先减少A账户的1000元，然后再为B账号增加1000元。如果全部执行成功，数据库处于一致性；如果仅执行完A账户金额的修改，而没有增加B账户的金额，则数据库就处于不一致状态，这时就需要取消前面的操作。这过程中会有一系列的操作，比如余额查询，余额做加减法，更新余额等，这些操作必须保证是一个整体执行，要么全部成功，要么全部失败，不能让A账户钱扣了，但是中途某些操作失败了，导致B账户更新余额失败。这样用户就不乐意了，银行这不是坑我吗？因此简单来说，事务就是要保证一组数据库操作，要么全部成功，要么全部失败。在MySQL中，事务支持是在引擎层实现的。你现在知道，MySQL是一个支持多引擎的系统，但并不是所有的引擎都支持事务。比如MySQL原生的MyISAM引擎就不支持事务，这也是MyISAM被InnoDB取代的重要原因之一。 接下来会以InnoDB为例，抽丝剥茧MySQL在事务支持方面的特定实现