IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> 你知道MySQL中三大日志的作用吗,binlog、redo log、undo log日志? -> 正文阅读

[大数据]你知道MySQL中三大日志的作用吗,binlog、redo log、undo log日志?

1.redo log

  • 记录数据修改后的值,对事务持久性的保障,让数据库拥有崩溃恢复能力。
  • 修改操作先对Buffer Pool的数据进行更新并且记录在redo log buffer中,如下图所示,redo log buffer 然后在刷盘到了硬盘中的redo log中。
    在这里插入图片描述
  • 上面提高了redo log buffer会进行刷盘,那刷盘的时机呢?InnoDB为redo log刷盘提高了innodb_flush_log_at_trx_commit 参数,支持三种策略。默认值为1.
    0 :设置为 0 的时候,表示每次事务提交时不进行刷盘操作
    1 :设置为 1 的时候,表示每次事务提交时都将进行刷盘操作(默认值)
    2 :设置为 2 的时候,表示每次事务提交时都只把 redo log buffer 内容写入 page cache
  • 策略为0的时候:
    在这里插入图片描述> - 策略为1的时候:
  • 策略为2的时候:
    在这里插入图片描述
  • 磁盘中的redo log不是单个文件,而是以文件组的方式存在的,如下图所示,通过write pos(记录写的位置,一遍写一遍后移)和checkpoint(记录是当前要擦除的位置,也是往后推移)来进行标志读写和清除。
    在这里插入图片描述
  • 存在一个问题,为什么会存在redo log,修改数据直接刷盘就行了?为什么还要存在redo log?因为直接刷盘是按照整个缓存页进行刷盘的,性能十分差,并且修改的数据位置也比较少,用redo log记录去刷盘,性能远远超过直接刷页。

2.binlog

  • 只要发生表数据的更新就会有binlog日志,binlog会记录所有涉及数据的逻辑操作,并且是顺序写。
  • binlog的作用:MySQL数据库的数据备份、主备、主主、主从都离不开binlog,需要依靠binlog来同步数据,保证数据一致性。
  • 记录格式:通过binlog_format参数指定:statement(会根据没一条sql语句进行记录)、row(在对statement中处理不了的now()进行修补,用一个引用来代理)、mixed(前两者的混合)
  • 写入机制:先把日志写入binlog cache中,事务提交之后在写入binlog中,如下图所示,系统是将binlog cache在写入文件系统page cache中,速度比较快,然后由fsyn持久化到次哦按中。
    在这里插入图片描述
  • write和fsync的时机,可以由参数sync_binlog控制,默认是0。为0的时候,表示每次提交事务都只write,由系统自行判断什么时候执行fsync。
    在这里插入图片描述
  • 虽然性能得到提升,但是机器宕机,page cache里面的 binlog 会丢失。
    为了安全起见,可以设置为1,表示每次提交事务都会执行fsync,就如同 redo log 日志刷盘流程 一样。
    最后还有一种折中方式,可以设置为N(N>1),表示每次提交事务都write,但累积N个事务后才fsync。

两阶段提交

  • 作用:为了解决redo log和binlog不一致的问题。
  • redo log的写入拆成两个步骤prepare和commit。如下图所示。在这里插入图片描述
  • 使用两阶段提交后,写入binlog时发生异常也不会有影响,因为MySQL根据redo log日志恢复数据时,发现redo log还处于prepare阶段,并且没有对应binlog日志,就会回滚该事务。

undo log

  • 保证了事务的原子性,记录了数据修改之前的值,用于回滚恢复。
  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2022-04-23 10:53:19  更:2022-04-23 10:53:59 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/24 3:38:11-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码