MySQL 日志

极客时间MySQL专栏总结

使用InnoDB引擎过程中，比较耳熟能详的三种日志：

1. undo log：用于回滚；
2. redo log：崩溃恢复；
3. bin log：备份、主从同步。

WAL技术：Write-Ahead Logging，先写日志，再写磁盘。

如果每一次更新操作都要写入磁盘，查找+写入的IO成本很高，使用WAL技术可以避免。

redo log 重做日志

1. InnoDB 引擎就会先把记录写到 redo log里面，并更新内存，这个时候更新就算完成了；

2. 同时，InnoDB 引擎会在适当的时候，将这个操作记录更新到磁盘里面，而这个更新往往是在系统比较空闲的时候做。

   
   
   

   redo log的大小是固定的，可以配置为一组四个的文件，每个文件的大小是1GB，那么总共就可以记录4GB的操作。从头开始写，写到末尾就回到开头循环写。

• write pos：当前记录的位置，一边写一遍后移，写到3号文件末尾就回到0号文件开头；
• check point：当前要擦除的位置，也是往后推移并且循环的，擦除记录前要把记录更新到数据文件；
• write pos和check point之间是空白位置，可以用来记录新的操作。如果write pos追上了check point，这时不能再执行更新操作，要先停下来擦除一些记录，把check point 推进一下。

个人理解redo log其实是利用了磁盘的顺序写提高性能；redo log保证了crash-safe，已提交的数据不会丢失。

binlog 归档日志

归档：同义词为存档，指将处理完并且具有保存价值的事情或文件经系统整理后交档案室（馆）保存备案(备查)的过程。

与 redo log 的不同

1. redo log是InnoDB引擎特有的；bin log是MySQLServer层实现的，所有引擎都可以使用；
2. redo log是物理日志，记录的是“在某个数据页上做了什么修改”；binlog是逻辑日志，记录的是这个语句的原始逻辑；
3. redo log是循环写的，空间固定会被用完；binlog是可以追加写入的。追加写”是指 binlog 文件写到一定大小后会切换到下一个，并不会覆盖以前的日志。

为什么有两份日志

最开始MySQL的设计是用binlog作为归档用途，且MySQL刚开始是没有crash-safe能力的。后面出现了InnoDB引擎，通过redo log实现了crash-safe。

三种格式

• statement;
  binlog记录的是SQL语句原文。
  在从库执行同样的SQL语句时，可能由于使用不同的索引，导致语句执行的效果不同，造成主从不一致。
• row;
  binlog记录的是真实行的数据。
  不会有主备不一致问题，但是占用空间可能比较大。
• mixed。
  statement和row的混合。

最好使用row格式，尽管可能会比较占用内存，但是比较利于恢复数据。恢复数据时，最好使用mysqlbinlog工具接续出来，然后把解析的结果发给MySQL执行。

更新时两种日志的写入

1. 执行器先找引擎取 ID=2 这一行。ID 是主键，引擎直接用树搜索找到这一行。如果 ID=2 这一行所在的数据页本来就在内存中，就直接返回给执行器；否则，需要先从磁盘读入内存，然后再返回。
2. 执行器拿到引擎给的行数据，把这个值加上 1，比如原来是 N，现在就是 N+1，得到新的一行数据，再调用引擎接口写入这行新数据。
3. 引擎将这行新数据更新到内存中，同时将这个更新操作记录到 redo log 里面，此时 redo log 处于 prepare 状态。然后告知执行器执行完成了，随时可以提交事务。
4. 执行器生成这个操作的 binlog，并把 binlog 写入磁盘。
5. 执行器调用引擎的提交事务接口，引擎把刚刚写入的 redo log 改成提交（commit）状态，更新完成。

• 两阶段提交
  是为了让两份日志之间逻辑一致。
  先写redo log，可能导致binlog少一条，恢复临时库时与原库不同；
  先写bin log，redo log少一条，崩溃恢复后没有这条数据，同样导致临时库时与原库不同。

双1配置

• innodb_flush_log_at_trx_commit
  这个参数设置成 1 的时候，表示每次事务的 redo log 都直接持久化到磁盘。
• sync_binlog
  这个参数设置成 1 的时候，表示每次事务的 binlog 都持久化到磁盘。

undo log

MySQL的MVCC是基于undo log实现的，每次需要查询历史版本的数据，是通过undo log计算出来的。