理解 InnoDB 如何处理崩溃恢复

在数据库领域,数据的一致性与可靠性至关重要。InnoDB 存储引擎的崩溃恢复机制是保障数据安全的核心,其中 Doublewrite Buffer 和 Redo Log 发挥着关键作用。下面,我们将详细探讨 InnoDB 从写入到崩溃恢复的全过程。

一、写入流程

  1. 修改页面:当事务对数据库页面进行修改时,首先在内存中的 Buffer Pool 完成操作。此时,被修改的页面成为 “脏页(Dirty Page)” ,就像刚画完画还未整理的画布,数据已变更但尚未持久化到磁盘。
  2. 记录重做日志(Redo Log):每次页面修改,InnoDB 会立即将操作记录到 Redo Log 中,并且同步写入磁盘。这就好比给每次修改都留了备份,即便系统突发崩溃,也能依据 Redo Log 将修改重新应用,确保数据不丢失。
  3. 准备刷新脏页:随着时间推移,Buffer Pool 中的脏页逐渐增多,如同堆满杂物的房间需要清理。InnoDB 会挑选一批脏页,准备将其刷新到磁盘,释放缓存空间,维持数据一致性。
  4. 写入 Doublewrite Buffer:在将选定的脏页写回数据文件前,InnoDB 会先将页面副本写入数据文件中的 Doublewrite Buffer 区域。此写入操作虽为异步,但必须成功完成后才会继续下一步,类似出门前确认门窗是否锁好。
  5. 写入最终位置:页面成功写入 Doublewrite Buffer 后,InnoDB 会尝试将其直接写入实际的数据文件位置。该写入也是异步的,并且能与写入 Doublewrite Buffer 的操作并行执行,就像同时进行烧水和准备泡茶材料,提高了效率。
  6. 确认写入完成:若两个写入操作都成功,页面可从 Buffer Pool 移除或标记为干净页面(Clean Page)。同时,Doublewrite Buffer 中对应的槽位标记为可用,供后续写操作使用,类似洗净用过的杯子以便下次再用。

二、崩溃恢复流程

若在写入过程中发生崩溃,InnoDB 重启后会执行以下恢复步骤:

  1. 分析 Redo Log:系统启动时,InnoDB 读取 Redo Log,确定哪些事务需要回滚或重做,如同经验丰富的侦探梳理线索,确保未完成的事务得到妥善处理,维护数据一致性。
  2. 检查 Doublewrite Buffer:InnoDB 检查 Doublewrite Buffer 中的页面,对比其与对应数据文件中的页面,查找是否存在因崩溃未完全写入的数据页,就像仔细核对两份文件是否一致。
  3. 修复部分写入的页面:对于部分写入的数据页,InnoDB 用 Doublewrite Buffer 中的完整副本来覆盖有问题的数据文件页面,如同用正确拼图块替换错误的,保证页面的一致性和完整性。
  4. 完成恢复:经过上述步骤,因崩溃导致的问题基本解决,数据库恢复正常运行。未提交的事务回滚,未持久化的已提交事务依据 Redo Log 重做。

三、极端情况下的应对策略

当 Doublewrite Buffer 也出现部分写入或损坏时,InnoDB 采取以下策略:

  1. 依赖 Redo Log:若 Doublewrite Buffer 中的页面不可用或损坏,InnoDB 完全依赖 Redo Log 进行恢复。Redo Log 记录了所有数据库页的修改,即便没有 Doublewrite Buffer 的协助,也能通过重放日志条目重建数据一致性。
  2. 页面修复:对于无法从 Doublewrite Buffer 获取完整副本的页面,InnoDB 根据 Redo Log 中的信息修复,可能需应用一系列日志记录,直至页面恢复到崩溃前状态。
  3. 回滚未提交事务:所有未提交的事务回滚,确保数据库处于一致状态。已提交的事务则根据 Redo Log 重做,保证其效果持久化。
  4. 标记问题页面:若某些页面因严重硬件故障等确实无法修复,InnoDB 标记这些页面为损坏,并排除在后续操作之外。数据库管理员可通过备份或其他手段恢复这部分数据。
  5. 重启后的进一步检查:在恢复正常服务前,InnoDB 执行额外的健康检查,如表空间一致性检查等,确保整个数据库系统的稳定性和可靠性。

四、双写过程

  1. 第一次写入(写入到 Doublewrite Buffer):准备将一个或多个脏页刷新到磁盘前,InnoDB 首先将页面副本写入数据文件中的 Doublewrite Buffer 区域。该区域位于共享表空间(如 ibdata1),是一段专门预留的连续空间,划分为两个 chunk,每个 chunk 可容纳 64 个页面(约 128MB,由 128 个 extent 组成,每个 extent 为 1MB) 。
  2. 第二次写入(写入到目标位置):页面成功写入 Doublewrite Buffer 后,InnoDB 尝试将其直接写入实际的数据文件位置。采用异步 I/O 操作,写入 Doublewrite Buffer 和写入最终位置的操作可在一定程度上并行执行。

InnoDB 凭借这套复杂精妙的机制,有效保护数据免受部分更新问题的影响,确保在极端情况下也能自动修复问题,维持数据的一致性和可靠性。这种设计使 InnoDB 在崩溃恢复时自动修正数据损坏,无需依赖额外备份或复杂过程。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/963211.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

[EAI-028] Diffusion-VLA,能够进行多模态推理和机器人动作预测的VLA模型

Paper Card 论文标题:Diffusion-VLA: Scaling Robot Foundation Models via Unified Diffusion and Autoregression 论文作者:Junjie Wen, Minjie Zhu, Yichen Zhu, Zhibin Tang, Jinming Li, Zhongyi Zhou, Chengmeng Li, Xiaoyu Liu, Yaxin Peng, Chao…

3.5.5 基于横盘结构的分析体系——缠论(走势类型)

走势 缠论中走势的定义如下: 包含一个中枢的走势——盘整 包含两个或多个中枢的走势——趋势 方向 趋势(两中枢或多中枢) 盘整(一中枢) 上涨 下跌 表1-8 盘整和趋势类型的走势理论图。 趋势和中枢 …

使用PyQt5绘制带有刻度的温度计控件

前言:进入学习Python开发上位机界面的第二阶段,学习如何开发自定义控件,从常用的控件入手学习,本期主要学习如何使用PyQt5绘制带有刻度的温度计控件。 1. 先找到一篇参考文章 参考文章:Qt编写自定义控件5-柱状温度计…

DIFY源码解析

偶然发现Github上某位大佬开源的DIFY源码注释和解析,目前还处于陆续不断更新地更新过程中,为大佬的专业和开源贡献精神点赞。先收藏链接,后续慢慢学习。 相关链接如下: DIFY源码解析

赛博算卦之周易六十四卦JAVA实现:六幺算尽天下事,梅花化解天下苦。

佬们过年好呀~新年第一篇博客让我们来场赛博算命吧! 更多文章:个人主页 系列文章:JAVA专栏 欢迎各位大佬来访哦~互三必回!!! 文章目录 #一、文化背景概述1.文化起源2.起卦步骤 #二、卦象解读#三、just do i…

「AI学习笔记」深度学习的起源与发展:从神经网络到大数据(二)

深度学习(DL)是现代人工智能(AI)的核心之一,但它并不是一夜之间出现的技术。从最初的理论提出到如今的广泛应用,深度学习经历了几乎一个世纪的不断探索与发展。今天,我们一起回顾深度学习的历史…

AIGC技术中常提到的 “嵌入转换到同一个向量空间中”该如何理解

在AIGC(人工智能生成内容)技术中,“嵌入转换到同一个向量空间中”是一个核心概念,其主要目的是将不同类型的输入数据(如文本、图像、音频等)映射到一个统一的连续向量空间中,从而实现数据之间的…

单细胞分析基础-第一节 数据质控、降维聚类

scRNA_pipeline\1.Seurat 生物技能树 可进官网查询 添加链接描述 分析流程 准备:R包安装 options("repos"="https://mirrors.ustc.edu.cn/CRAN/") if(!require("BiocManager")) install.packages("BiocManager",update = F,ask =…

【13】WLC HA介绍和配置

1.概述 本文对AireOS WLC的HA进行介绍,和大多数网络架构设计一样,单台的WLC是无法保证设备的冗余性的,而且WLC也不是双引擎的设备,所以需要依靠High Available的技术来为WLC提供高可用性。 2.WLC HA类型 AireOS WLC的高可用性技术可以分为N+1的SSO的HA。不是所有的设备都…

Alibaba开发规范_编程规约之命名风格

文章目录 命名风格的基本原则1. 命名不能以下划线或美元符号开始或结束2. 严禁使用拼音与英文混合或直接使用中文3. 类名使用 UpperCamelCase 风格,但以下情形例外:DO / BO / DTO / VO / AO / PO / UID 等4. 方法名、参数名、成员变量、局部变量使用 low…

【Elasticsearch 基础入门】Centos7下Elasticsearch 7.x安装与配置(单机)

Elasticsearch系列文章目录 【Elasticsearch 基础入门】一文带你了解Elasticsearch!!!【Elasticsearch 基础入门】Centos7下Elasticsearch 7.x安装与配置(单机) 目录 Elasticsearch系列文章目录前言单机模式1. 安装 J…

Gurobi基础语法之 addConstr, addConstrs, addQConstr, addMQConstr

在新版本的 Gurobi 中,向 addConstr 这个方法中传入一个 TempConstr 对象,在模型中就会根据这个对象生成一个约束。更重要的是:TempConstr 对象可以传给所有addConstr系列方法,所以下面先介绍 TempConstr 对象 TempConstr TempC…

深度学习可视化指标方法工具

1. TensorBoard 简介:由TensorFlow提供的可视化工具,现已支持多种深度学习框架。 功能: 图可视化:展示计算图结构,帮助理解模型架构。 标量仪表板:跟踪损失和准确率等指标的变化。 直方图仪表板&#xf…

【自开发工具介绍】SQLSERVER的ImpDp和ExpDp工具01

1、开发背景 大家都很熟悉,Oracle提供了Impdp和ExpDp工具,功能很强大,可以进行db的导入导出的处理。但是对于Sqlserver数据库只是提供了简单的图形化的导出导入工具,在实际的开发和生产环境不太可能让用户在图形化的界面选择移行…

小程序-视图与逻辑

前言 1. 声明式导航 open-type"switchTab"如果没有写这个,因为是tabBar所以写这个,就无法跳转。路径开始也必须为斜线 open-type"navigate"这个可以不写 现在开始实现后退的效果 现在我们就在list页面里面实现后退 2.编程式导航…

list的使用,及部分功能的模拟实现(C++)

目录(文章中"节点"和"结点"是同一个意思) 1. list的介绍及使用 1.1 list的介绍 1.2 list的使用 1.2.1 list的构造 1.2.2 list iterator的使用 1.2.3 list capacity 1.2.4 list element access 1.2.5 list modifiers 1.2.6 list…

StarRocks BE源码编译、CLion高亮跳转方法

阅读SR BE源码时,很多类的引用位置爆红找不到,或无法跳转过去,而自己的Linux机器往往缺乏各种C依赖库,配置安装比较麻烦,因此总体的思路是通过CLion远程连接SR社区已经安装完各种依赖库的Docker容器,进行编…

Axure PR 9 旋转效果 设计交互

大家好,我是大明同学。 这期内容,我们将学习Axure中的旋转效果设计与交互技巧。 旋转 创建旋转效果所需的元件 1.打开一个新的 RP 文件并在画布上打开 Page 1。 2.在元件库中拖出一个按钮元件。 创建交互 创建按钮交互状态 1.选中按钮元件&#xf…

Java - 引用类型:强引用、软引用、弱引用和虚引用详解

文章目录 概述1. 强引用(Strong Reference)1.1 什么是强引用?1.2 强引用的特点1.3 强引用的使用场景1.4 强引用的注意事项 2. 软引用(Soft Reference)2.1 什么是软引用?2.2 软引用的特点2.3 软引用的使用场…

S4 HANA给科目分配允许记账的税码

本文主要介绍在S4 HANA OP中给科目分配允许记账的税码相关设置。具体请参照如下内容: 1. 给科目分配允许记账的税码 以上配置定义了总账科目可以使用什么税码进行记账。通常在科目主数据中会明确总账科目的“Tax Category”来请明确总账科目可以使用什么类型的税码…