MySQL多数据源笔记1-MySQL主从复制

场景

• 当系统存在一个情景，有很多的SQL需要锁表，可能导致不能从库中读取数据，往往为了业务的正常运行，需要做多库运行-主从分离
• 需要做数据的热备时，需要多库-主从分离
• 避免I/O访问频率过高，需要多库，这里使用的是多库的主从分离，提高了单个机器的I/O性能

优点

1. 数据分布data distribution
2. 负载平衡 load balancing
3. 备份 backups
4. 高可用性与容错性 high availability and failover

缺点

一致性存在延时，无法保证在主库中更新的数据， 从库中立即能查看最新的数据

原理

MySQL主从复制的基本交互过程，如下：

1

binary logs是主库中保存所有更新事件日志的二进制文件。

主从复制的基础是主库记录数据库的所有变更记录到binlog二进制文件中。
binlog是数据库服务器启动的那一刻起，保存所有修改数据库结构或内容的一个文件。

mysql主从复制是一个异步的复制过程，主库发送更新事件到从库，从库读取更新记录，
并执行更新记录，使得从库的内容与主库保持一致。

在主库里，只要有更新事件出现，就会被依次地写入到binlog里面，之后会推到从库中作为从库进行复制的数据源。

具体细节如下：

1. 每当有从库连接到主库的时候，主库都会创建一个线程(binlog输出线程)然后发送binlog内容到从库。
   对于每一个即将发送给从库的sql事件，binlog输出线程会将其锁住。一旦该事件被线程读取完之后，该锁会被释放，即使在该事件完全发送到从库的时候，该锁也会被释放。
   在从库里，当复制开始的时候，从库就会创建两个线程进行处理：

• 当 start slave 语句在从库开始执行之后，从库创建一个I/O线程（从库I/O线程），该线程连接到主库并请求主库发送binlog里面的更新记录到从库上。
• 从库I/O线程读取主库的binlog输出线程发送的更新并拷贝这些更新到本地文件，其中包括relay log文件。从库创建一个SQL线程，这个线程读取从库I/O线程写到relay log(mysql-relay-bin.xxxxxx)的更新事件并执行。

对于每一个主从复制的连接，都有三个线程。拥有多个从库的主库为每一个连接到主库的从库创建一个binlog输出线程，每一个从库都有它自己的I/O线程和SQL线程。

从库通过创建两个独立的线程，使得在进行复制时，从库的读和写进行了分离。因此，即使负责执行的线程运行较慢，负责读取更新语句的线程并不会因此变得缓慢。

比如说，如果从库有一段时间没运行了，当它在此启动的时候，尽管它的SQL线程执行比较慢，它的I/O线程可以快速地从主库里读取所有的binlog内容。

这样一来，即使从库在SQL线程执行完所有读取到的语句前停止运行了，I/O线程也至少完全读取了所有的内容，并将其安全地备份在从库本地的relay log，随时准备在从库下一次启动的时候执行语句。

总结起来就是：

1、master在执行sql之后，记录二进制log文件（bin-log）。

2、slave连接master，并从master获取binlog，存于本地relay-log中，然后从上次记住的位置起执行SQL语句，一旦遇到错误则停止同步。