美文网首页mysql程序员
mysql_主从复制的实现

mysql_主从复制的实现

作者: hello_coke | 来源:发表于2016-09-03 21:24 被阅读156次

    <h2>背景:</h2>
    在如今的互联网时代,高并发、大数据都已经成为其中最热的之一。mysql不可能像redis一样单台机器每秒最多能处理10W次读写,也达不到elasticsearch一样存储上亿几十亿数据做过滤或者简单的聚合能在50-100ms以内成功响应。但是据我所知在中国一些互联网排名前十的公司的产品、订单这种关键数据还是存储在mysql中,更不要说mysql在一些更小的公司的应用,mysql重要性不言而喻。从这一讲会开始我的mysql文章之路。
    现在经常有个词能听到"读写分离",是的读写分离可以降低单点机器的并发访问压力。从而实现主机器专门用于写入,另外的一个从节点或者多个从节点来实现读。
    <h2>复制实现原理</h2>
    下面贴出来其实现流程图:

    Paste_Image.png

    分为同步复制和异步复制,实际复制架构中大部分为异步复制。 复制的基本过程如下:

    (1)、Slave上面的IO进程连接上Master,并请求从指定日志文件的指定位置(或者从最开始的日志)之后的日志内容;

    (2)、Master接收到来自Slave的IO进程的请求后,通过负责复制的IO进程根据请求信息读取制定日志指定位置之后的日志信息,返回给Slave 的IO进程。返回信息中除了日志所包含的信息之外,还包括本次返回的信息已经到Master端的bin-log文件的名称以及bin-log的位置;

    (3)、Slave的IO进程接收到信息后,将接收到的日志内容依次添加到Slave端的relay-log文件的最末端,并将读取到的Master端的 bin-log的文件名和位置记录到master-info文件中,以便在下一次读取的时候能够清楚的告诉Master“我需要从某个bin-log的哪个位置开始往后的日志内容,请发给我”;

    (4)、Slave的Sql进程检测到relay-log中新增加了内容后,会马上解析relay-log的内容成为在Master端真实执行时候的那些可执行的内容,并在自身执行。

    其实稍微了解mysql底层一点的都知道,mysql的更新记录都可以配置保存在binlog文件中,这个文件用处很大,有一个比较大的应用就是有些公司开发监听binlog变化的插件,再结合消息中间件来实现数据变更实时通知订阅方。当然这次我们要讲的还是slave机器怎么样实现对于master机器的主从。
    <h4>主从复制的配置</h4>
    准备前提:
    <ul>
    <li>安装两个虚拟机 master:192.168.30.128 slave:192.168.30.131</li>
    <li>分别在两台机器上面安装mysql,具体的流程可以参照我之前写的http://www.jianshu.com/p/674f56b2fe56</li>
    </ul>
    当你上面两步都做完了以后我想你已经都把mysql 服务给起来了吧,接下来我们需要配置mysql的binlog信息。
    <b>1、找到my.cnf文件。按我之前介绍的文章安装的话是在/etc/my.cnf下面,具体是在原来的文件里面新加三个参数:</b>
    <pre>
    server-id=128 #设置服务器唯一的id,默认是1,我们设置ip最后一段,slave设置131
    log-bin=mysql-bin # 启用二进制日志
    binlog-ignore-db = mysql,information_schema #忽略写入binlog的库,因为这些都不是我们关心的自己创建的业务库
    </pre>
    具体的修改如下:

    123.png

    完成以后重启service mysqld start master上面的mysql服务
    <b>2、master机器binlog配置好了以后还需要给slave机器授权IO读取它啊,登录mysql -u root -proot以后执行命令如下:</b>
    <pre>
    GRANT REPLICATION SLAVE ON . to 'sync'@'192.168.30.131' identified by 'root'; //新建一个sync用户密码为root给slave机器使用。后面salve机器配置会使用到
    </pre>
    具体的修改如下:

    给slave机器复制binlog权限.png

    同时也可以通过show master status 命令查看binlog信息:
    <pre>
    mysql> show master status;
    +------------------+----------+--------------+--------------------------+
    | File | Position | Binlog_Do_DB | Binlog_Ignore_DB |
    +------------------+----------+--------------+--------------------------+
    | mysql-bin.000001 | 259 | | mysql,information_schema |
    +------------------+----------+--------------+--------------------------+
    </pre>
    看情况binlog文件名称+position数据,因为这给后面在salve机器上配置连接master机器有用到。
    <b>3、配置slvae机器,直接上命令吧:</b>
    <pre>
    change master to
    master_host='192.168.30.128', //master的ip
    master_user='sync', //master授予的用户名称
    master_password='root', //密码
    master_log_file='mysql-bin.000001', //master的binlog名称
    master_log_pos=259;//位置
    </pre>
    别忘记了重启slave机器,再用mysql> show slave status \G查看执行结果:

    Paste_Image.png
    <b>4、测试最后的复制结果</b>
    <pre>
    1、master机器:
    mysql> show databases;
    +--------------------+
    | Database |
    +--------------------+
    | information_schema |
    | master_slave |
    | mysql |
    | storm_test |
    | test |
    | test12 |
    +--------------------+
    6 rows in set (0.00 sec)
    2、slave机器:
    mysql> show databases;
    +--------------------+
    | Database |
    +--------------------+
    | information_schema |
    | master_slave |
    | mysql |
    | test |
    +--------------------+
    4 rows in set (0.00 sec)
    3、在master机器上新建test_copy数据库
    mysql> create database test_copy;
    Query OK, 1 row affected (0.00 sec)

    mysql> show databases;
    +--------------------+
    | Database |
    +--------------------+
    | information_schema |
    | master_slave |
    | mysql |
    | storm_test |
    | test |
    | test12 |
    | test_copy | //新建数据库
    +--------------------+
    7 rows in set (0.01 sec)
    4、查看salve机器结果:
    mysql> show databases;
    +--------------------+
    | Database |
    +--------------------+
    | information_schema |
    | master_slave |
    | mysql |
    | test |
    | test_copy | //复制成功
    +--------------------+
    5 rows in set (0.00 sec)
    </pre>
    是的这样的话主从复制已经实现了,简单。下一节文章主要是讲使用mysql-proxy代理来实现读写分离。

    相关文章

      网友评论

        本文标题:mysql_主从复制的实现

        本文链接:https://www.haomeiwen.com/subject/psxlettx.html