谈谈MySQL的InnoDB存储引擎

大家好，我是易安！
  本日我们谈一谈MySQL中InnoDB存储引擎。InnoDB存储引擎作为我们最常用到的存储引擎之一，充分熟悉它的的实现和运行原理，有助于我们更好地创建和维护数据库表。
  InnoDB体系架构

  InnoDB主要包罗了内存池、后台线程以及存储文件。内存池又是由多个内存块组成的，主要包罗缓存磁盘数据、redo log缓冲等；后台线程则包罗了Master Thread、IO Thread以及Purge Thread等；由InnoDB存储引擎实现的表的存储布局文件一样寻常包罗表布局文件（.frm）、共享表空间文件（ibdata1）、独占表空间文件（ibd）以及日记文件（redo文件等）等。
     

    1. 内存池

  我们知道，假如客户端从数据库中读取数据是直接从磁盘读取的话，无疑会带来一定的性能瓶颈，缓冲池的作用就是提高整个数据库的读写性能。
  客户端读取数据时，假如数据存在于缓冲池中，客户端就会直接读取缓冲池中的数据，否则再去磁盘中读取；对于数据库中的修改数据，起首是修改在缓冲池中的数据，然后再通过Master Thread线程革新到磁盘上。
  理论上来说，缓冲池的内存越大越好。缓冲池中不仅缓存索引页和数据页，还包罗了undo页，插入缓存、自适应哈希索引以及InnoDB的锁信息等等。
  InnoDB答应多个缓冲池实例，从而镌汰数据库内部资源的竞争，增强数据库的并发处理本领。
  InnoDB存储引擎会先将重做日记信息放入到缓冲区中，然后再革新到重做日记文件中。
  2. 后台线程

  Master Thread 主要负责将缓冲池中的数据异步革新到磁盘中，除此之外还包罗插入缓存、undo页的接纳等，IO Thread是负责读写IO的线程，而Purge Thread主要用于接纳事件已经提交了的undo log，Pager Cleaner Thread是新引入的一个用于帮忙Master Thread革新脏页到磁盘的线程，它可以减轻Master Thread的工作压力，镌汰壅闭。
  3. 存储文件

  在MySQL中建立一张表都会生成一个.frm文件，该文件是用来生存每个表的元数据信息的，主要包含表布局定义。
  在InnoDB中，存储数据都是按表空间进行存放的，默认为共享表空间，存储的文件即为共享表空间文件（ibdata1）。若设置了参数innodb_file_per_table为1，则会将存储的数据、索引等信息单独存储在一个独占表空间，因此也会产生一个独占表空间文件（ibd）。假如你对共享表空间和独占表空间的明白还不敷透彻，接下来我会详解。
  而日记文件则主要是重做日记文件，主要记录事件产生的重做日记，保证事件的一致性。
  InnoDB逻辑存储布局

  InnoDB逻辑存储布局分为表空间（Tablespace）、段(Segment)、区(Extent)、页Page)以及行(row)。
     

    1. 表空间（Tablespace）

  InnoDB提供了两种表空间存储数据的方式，一种是共享表空间，一种是独占表空间。 InnoDB 默认会将其全部的表数据存储在一个共享表空间中，即ibdata1。
  我们可以通过设置innodb_file_per_table参数为1（1代表独占方式）开启独占表空间模式。开启之后，每个表都有本身独立的表空间物理文件，全部的数据以及索引都会存储在该文件中，如许方便备份以及规复数据。
  2. 段(Segment)

  表空间是由各个段组成的，段一样寻常分为数据段、索引段和回滚段等。我们知道，InnoDB默认是基于B +树实现的数据存储。
  这里的索引段则是指的B +树的非叶子节点，而数据段则是B +树的叶子节点。而回滚段则指的是回滚数据，MVCC就是使用了回滚段实现了多版本查询数据。
  3. 区(Extent) / 页（Page）

  区是表空间的单元布局，每个区的巨细为1MB。而页是组成区的最小单元，页也是InnoDB存储引擎磁盘管理的最小单元，每个页的巨细默认为16KB。为了保证页的一连性，InnoDB存储引擎每次从磁盘申请4-5个区。
  4. 行（Row）

  InnoDB存储引擎是面向行的（row-oriented)，也就是说数据是按行进行存放的，每个页存放的行记录也是有硬性定义的，最多答应存放16KB/2-200行，即7992行记录。
  InnoDB事件之redo log工作原理

  InnoDB是一个事件性的存储引擎，而InnoDB的事件实现是基于事件日记redo log和undo log实现的。redo log是重做日记，提供再写入操作，实现事件的持久性；undo log是回滚日记，提供回滚操作，保证事件的一致性。
  redo log又包罗了内存中的日记缓冲（redo log buffer）以及生存在磁盘的重做日记文件（redo log file），前者存储在内存中，容易丢失，后者持久化在磁盘中，不会丢失。
  InnoDB的更新操作采用的是Write Ahead Log策略，即先写日记，再写入磁盘。当一条记录更新时，InnoDB会先把记录写入到redo log buffer中，并更新内存数据。我们可以通过参数innodb_flush_log_at_trx_commit自定义commit时，怎样将redo log buffer中的日记革新到redo log file中。
  在这里，我们需要注意的是InnoDB的redo log的巨细是固定的，分别有多个日记文件采用循环方式组成一个循环闭环，当写到末了时，会回到开头循环写日记。我们可以通过参数innodb_log_files_in_group和innodb_log_file_size配置日记文件数目和每个日记文件的巨细。
  Buffer Pool中更新的数据未革新到磁盘中，该内存页我们称之为脏页。最终脏页的数据会革新到磁盘中，将磁盘中的数据覆盖，这个过程与redo log不一定有关系。
  只有当redo log日记满了的情况下，才会主动触发脏页革新到磁盘，而脏页不仅只有redo log日记满了的情况才会革新到磁盘，以下几种情况同样会触发脏页的革新：
  

•          系统内存不足时，需要将一部分数据页镌汰掉，假如镌汰的是脏页，需要先将脏页同步到磁盘；
  
•          MySQL认为空闲的时间，这种情况没有性能标题；
  
•          MySQL正常关闭之前，会把全部的脏页刷入到磁盘，这种情况也没有性能标题。
  

  在生产环境中，假如我们开启了慢SQL监控，你会发现偶尔会出现一些用时稍长的SQL。这是因为脏页在革新到磁盘时可能会给数据库带来性能开销，导致数据库操作抖动。
     

    LRU镌汰策略

  刚刚我们了解了InnoDB的更新和插入操作的具体实现原理，接下来我们再来了解下读的实现和优化方式。
  InnoDB存储引擎是基于集合索引实现的数据存储，也就是除了索引列以及主键是存储在B +树之外，其它列数据也存储在B + 树的叶子节点中。而这里的索引页和数据页都会缓存在缓冲池中，在查询数据时，只要在缓冲池中存在该数据，InnoDB就不用每次都去磁盘中读取页，从而提高数据库的查询性能。
  固然缓冲池是一个很大的内存地区，但由于存放了各种范例的数据，加上存储数据量之大，缓冲池无法将全部的数据都存储在其中。因此，缓冲池需要通过LRU算法将近来且常常查询的数据缓存在其中，而不常查询的数据就镌汰出去。
  InnoDB对LRU做了一些优化，我们熟悉的LRU算法通常是将近来查询的数据放到LRU列表的首部，而InnoDB则是将数据放在一个midpoint位置，通常这个midpoint为列表长度的5/8。
  这种策略主要是为了制止一些不常查询的操作突然将热点数据镌汰出去，而热点数据被再次查询时，需要再次从磁盘中获取，从而影响数据库的查询性能。
  假如我们的热点数据比力多，我们可以通过调整midpoint值来增加热点数据的存储量，从而降低热点数据的镌汰率。
  总结

  本日我带你学习了InnoDB的实现和运行原理，希望你能感受到mysql的InnoDB的设计思想，造就本身数据库性能优化的本领。
  本文由 mdnice 多平台发布

免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！更多信息从访问主页：qidao123.com:ToB企服之家，中国第一个企服评测及商务社交产业平台。