博客
关于我
MySQL数据库详解(二)执行SQL更新时,其底层经历了哪些操作?
阅读量:459 次
发布时间:2019-03-06

本文共 1572 字,大约阅读时间需要 5 分钟。

MySQL 数据库的核心日志系统

在数据库管理中,日志系统是确保数据一致性和恢复能力的关键环节。MySQL 中最重要的两个日志模块是 redo log 和 binlog,它们分别承担不同的功能。理解这些日志模块的工作原理,可以帮助我们更好地理解 MySQL 的 crash-safe 能力以及数据恢复机制。

Redo Log(重做日志)

Redo log 是 InnoDB 引擎特有的日志系统,主要用于保证数据库的 crash-safe能力。其工作原理类似于酒店掌柜记录赊账的例子:先在“粉板”上记录操作,然后待空闲时将记录写入“账本”(数据文件)。

  • 循环写入机制

    Redo log 是固定大小的,比如可以配置为 4 个文件,每个文件大小为 1GB。操作会从第一个文件开始循环写入。当写入完最后一个文件后,下一次操作会继续写入第一个文件,形成环形结构。

  • 写入过程

    当有一条更新操作(如 update T set c=c+1 where ID=2)执行时,InnoDB 引擎先将修改记录到 redo log 中,并立即更新内存中的数据。redo log 的当前写入位置(write pos)会向前移动,直到所有操作记录完毕。

  • 检查点(Checkpoint)

    定期检查点时,系统会将 redo log 中尚未写入数据文件的部分记录复制到数据文件中,并清空这部分 redo log。这样,数据文件就保留了所有持久化的操作记录。

  • Crash-Safe能力

    由于 redo log 记录了所有操作,且在异常重启时会将未写入数据文件的 redo log 复制到数据文件中,InnoDB 引擎可以保证即使数据库崩溃,数据也不会丢失。

  • Binlog(归档日志)

    Binlog 是 MySQL Server 层的日志系统,主要用于记录所有的 SQL 语句和事务。它与 redo log 的区别在于:

    • 物理日志:Redo log 记录的是“数据页发生了什么变化”,而 binlog 记录的是“这个 SQL 语句的原始逻辑”。
    • 逻辑日志:Binlog 是逻辑日志,记录的是事务的全貌,而 redo log 是物理日志,记录的是具体的数据修改。
    • 追加写入:Binlog 文件可以追加写入,不会覆盖之前的日志。每次写入时会切换到新的文件,保持日志的完整性。

    两阶段提交(Two-Phase Commit,TPC)

    在数据库系统中,两阶段提交是确保数据日志的一致性的重要机制。它的核心思想是:

  • Prepare 阶段

    数据引擎首先将所有修改记录到 redo log 中,并通知执行器,可以提交事务。

  • Commit 阶段

    执行器生成 binlog 并写入磁盘,然后通知引擎将 redo log 从 prepare 状态提交到数据文件中,完成事务。

  • 两阶段提交的关键在于确保两份日志的逻辑一致。如果 binlog 或 redo log 中存在不一致的情况,可能会导致数据库状态与日志恢复的状态不符。

    小结

    今天我们讨论了 MySQL 中的核心日志模块及其工作原理。Redo log 负责 crash-safe 能力,而 binlog 负责记录所有 SQL 语句。两阶段提交机制确保了两份日志的逻辑一致性,从而保证了数据库的稳定性和可恢复性。

    在实际操作中,建议将以下参数配置为 1:

    • innodb_flush_log_at_trx_commit = 1:确保每次事务的 redo log 立即持久化到磁盘。
    • sync_binlog = 1:确保每次事务的 binlog 立即持久化到磁盘。

    如果你对数据库的恢复能力感兴趣,定期全量备份的周期也会影响系统的性能和恢复时间。在高负载系统中,一天一备可能比一周一备更有优势,因为它可以更快速地恢复到最近的状态,从而减少数据丢失的风险。

    转载地址:http://jzybz.baihongyu.com/

    你可能感兴趣的文章
    Python 操作 Redis
    查看>>
    Python 操作Mysql(PyMysql)
    查看>>
    Python 操作Redis
    查看>>
    Python 操作sqlite数据库及保存查询numpy类型数据(一)
    查看>>
    Python 操作sqlite数据库及保存查询numpy类型数据(二)
    查看>>
    Python 数据文件与网络数据序列化存储详解
    查看>>
    Python 数据结构与算法详解
    查看>>
    Python 数据采集、清洗、整理、分析以及可视化实战
    查看>>
    Python 数据预处理
    查看>>
    Python 无法安装包
    查看>>
    python 日历小部件 - 返回用户选择的日期
    查看>>
    Python 日志管理封装
    查看>>
    python 时间函数小总结
    查看>>
    Python 是否优化尾递归?
    查看>>
    Python 更新set
    查看>>
    Python 最强 IDE 详细使用指南!
    查看>>
    Python 有一个不可变的列表吗?
    查看>>
    Python 机器学习入门之 pandas 的使用
    查看>>
    Python 机器学习实战
    查看>>
    python 杀死子进程_subprocess.popen.kill杀死所有子进程
    查看>>