美文网首页
MySQL 日志

MySQL 日志

作者: 侧耳倾听y | 来源:发表于2021-09-06 23:32 被阅读0次

极客时间MySQL专栏总结

使用InnoDB引擎过程中,比较耳熟能详的三种日志:

  1. undo log:用于回滚;
  2. redo log:崩溃恢复;
  3. bin log:备份、主从同步。

WAL技术:Write-Ahead Logging,先写日志,再写磁盘。

如果每一次更新操作都要写入磁盘,查找+写入的IO成本很高,使用WAL技术可以避免。

redo log 重做日志
  1. InnoDB 引擎就会先把记录写到 redo log里面,并更新内存,这个时候更新就算完成了;
  2. 同时,InnoDB 引擎会在适当的时候,将这个操作记录更新到磁盘里面,而这个更新往往是在系统比较空闲的时候做。



    redo log的大小是固定的,可以配置为一组四个的文件,每个文件的大小是1GB,那么总共就可以记录4GB的操作。从头开始写,写到末尾就回到开头循环写。

  • write pos:当前记录的位置,一边写一遍后移,写到3号文件末尾就回到0号文件开头;
  • check point:当前要擦除的位置,也是往后推移并且循环的,擦除记录前要把记录更新到数据文件;
  • write pos和check point之间是空白位置,可以用来记录新的操作。如果write pos追上了check point,这时不能再执行更新操作,要先停下来擦除一些记录,把check point 推进一下。

个人理解redo log其实是利用了磁盘的顺序写提高性能;redo log保证了crash-safe,已提交的数据不会丢失。

binlog 归档日志

归档:同义词为存档,指将处理完并且具有保存价值的事情或文件经系统整理后交档案室(馆)保存备案(备查)的过程。

与 redo log 的不同
  1. redo log是InnoDB引擎特有的;bin log是MySQLServer层实现的,所有引擎都可以使用;
  2. redo log是物理日志,记录的是“在某个数据页上做了什么修改”;binlog是逻辑日志,记录的是这个语句的原始逻辑;
  3. redo log是循环写的,空间固定会被用完;binlog是可以追加写入的。追加写”是指 binlog 文件写到一定大小后会切换到下一个,并不会覆盖以前的日志。
为什么有两份日志

最开始MySQL的设计是用binlog作为归档用途,且MySQL刚开始是没有crash-safe能力的。后面出现了InnoDB引擎,通过redo log实现了crash-safe。

三种格式
  • statement;
    binlog记录的是SQL语句原文。
    在从库执行同样的SQL语句时,可能由于使用不同的索引,导致语句执行的效果不同,造成主从不一致。
  • row;
    binlog记录的是真实行的数据。
    不会有主备不一致问题,但是占用空间可能比较大。
  • mixed。
    statement和row的混合。

最好使用row格式,尽管可能会比较占用内存,但是比较利于恢复数据。恢复数据时,最好使用mysqlbinlog工具接续出来,然后把解析的结果发给MySQL执行。

更新时两种日志的写入
  1. 执行器先找引擎取 ID=2 这一行。ID 是主键,引擎直接用树搜索找到这一行。如果 ID=2 这一行所在的数据页本来就在内存中,就直接返回给执行器;否则,需要先从磁盘读入内存,然后再返回。
  2. 执行器拿到引擎给的行数据,把这个值加上 1,比如原来是 N,现在就是 N+1,得到新的一行数据,再调用引擎接口写入这行新数据。
  3. 引擎将这行新数据更新到内存中,同时将这个更新操作记录到 redo log 里面,此时 redo log 处于 prepare 状态。然后告知执行器执行完成了,随时可以提交事务。
  4. 执行器生成这个操作的 binlog,并把 binlog 写入磁盘。
  5. 执行器调用引擎的提交事务接口,引擎把刚刚写入的 redo log 改成提交(commit)状态,更新完成。
  • 两阶段提交
    是为了让两份日志之间逻辑一致。
    先写redo log,可能导致binlog少一条,恢复临时库时与原库不同;
    先写bin log,redo log少一条,崩溃恢复后没有这条数据,同样导致临时库时与原库不同。
双1配置
  • innodb_flush_log_at_trx_commit
    这个参数设置成 1 的时候,表示每次事务的 redo log 都直接持久化到磁盘。
  • sync_binlog
    这个参数设置成 1 的时候,表示每次事务的 binlog 都持久化到磁盘。
undo log

MySQL的MVCC是基于undo log实现的,每次需要查询历史版本的数据,是通过undo log计算出来的。

相关文章

网友评论

      本文标题:MySQL 日志

      本文链接:https://www.haomeiwen.com/subject/gsebiltx.html