美文网首页
MySQL MHA+Atlas 读写分离架构

MySQL MHA+Atlas 读写分离架构

作者: 这货不是王马勺 | 来源:发表于2021-08-24 11:19 被阅读0次

    参考https://www.jianshu.com/p/051c44f73530

    1. Atlas介绍

    Atlas是由 Qihoo 360, Web平台部基础架构团队开发维护的一个基于MySQL协议的数据中间层项目。
    它是在mysql-proxy 0.8.2版本的基础上,对其进行了优化,增加了一些新的功能特性。
    360内部使用Atlas运行的mysql业务,每天承载的读写请求数达几十亿条。
    下载地址
    https://github.com/Qihoo360/Atlas/releases
    注意:
    1、Atlas只能安装运行在64位的系统上
    2、Centos 5.X安装 Atlas-XX.el5.x86_64.rpm,Centos 6.X安装Atlas-XX.el6.x86_64.rpm。
    3、后端mysql版本应大于5.1,建议使用Mysql 5.6以上

    架构图
    解决读多写少、硬件利用率等问题

    2.安装配置

    yum install -y Atlas*
    cd /usr/local/mysql-proxy/conf
    mv test.cnf test.cnf.bak
     vi test.cnf
    [mysql-proxy]
    admin-username = user
    admin-password = pwd
    proxy-backend-addresses = 10.0.0.55:3306
    proxy-read-only-backend-addresses = 10.0.0.51:3306,10.0.0.53:3306
    pwds = repl:3yb5jEku5h4=,mha:O2jBXONX098=
    daemon = true
    keepalive = true
    event-threads = 8
    log-level = message
    log-path = /usr/local/mysql-proxy/log
    sql-log=ON
    proxy-address = 0.0.0.0:33060
    admin-address = 0.0.0.0:2345
    charset=utf8
    

    我们这里是下载的rpm包,rpm安装
    注:官网上没有el7适用的包,需要自行寻找
    需要配置写节点、读节点backend-addresses
    pwds是用户密码,这个和proxysql类似,数据库账号也要写入进来,二次验证,不过此处是加密过的密码,需要用/usr/local/mysql-proxy/bin/encrypt 123来给明文123加密
    sql-log=on就是记录操作日志
    proxy-address是对外提供服务的端口
    admin-address是管理端口
    启动atlas

    /usr/local/mysql-proxy/bin/mysql-proxyd test start
    ps -ef |grep proxy
    

    此处test指的是配置文件test.cnf的前缀

    3. Atlas功能测试

    测试读操作:

    mysql -umha -pmha  -h 10.0.0.53 -P 33060 
    db03 [(none)]>select @@server_id;
    

    不断重复操作,会发现分摊到52,53两个节点上
    测试写操作:

    mysql> begin;select @@server_id;commit;
    

    不断重复操作,会发现只有51节点

    4. 生产用户要求

    开发人员申请一个应用用户 app( select update insert) 密码123456,要通过10网段登录

    1. 在主库中,创建用户
    grant select ,update,insert on *.* to app@'10.0.0.%' identified by '123456';
    
    1. 在atlas中添加生产用户
    /usr/local/mysql-proxy/bin/encrypt  123456      ---->制作加密密码
    vim test.cnf
    pwds = repl:3yb5jEku5h4=,mha:O2jBXONX098=,app:/iZxz+0GRoA=
    /usr/local/mysql-proxy/bin/mysql-proxyd test restart
    [root@db03 conf]# mysql -uapp -p123456  -h 10.0.0.53 -P 33060
    

    实际上不用重启也可以在线添加账号密码,添加节点等,见下一节

    5. Atlas基本管理

    连接管理接口

    mysql -uuser -ppwd -h127.0.0.1 -P2345
    

    打印帮助:

    mysql> select * from help;
    

    查询后端所有节点信息

    mysql>  SELECT * FROM backends    ;
    +-------------+----------------+-------+------+
    | backend_ndx | address        | state | type |
    +-------------+----------------+-------+------+
    |           1 | 10.0.0.55:3306 | up    | rw   |
    |           2 | 10.0.0.51:3306 | up    | ro   |
    |           3 | 10.0.0.53:3306 | up    | ro   |
    +-------------+----------------+-------+------+
    3 rows in set (0.00 sec)
    

    动态添加删除节点

    REMOVE BACKEND 3;
    

    动态添加节点

    ADD SLAVE 10.0.0.53:3306;
    

    用户管理:

    select * from pwds;
    remove pwd repl;
    ADD ENPWD repl:3yb5jEku5h4=;
    

    保存配置到配置文件

    SAVE CONFIG;
    

    6. 自动分表

    使用Atlas的分表功能时,首先需要在配置文件test.cnf设置tables参数。
    tables参数设置格式:数据库名.表名.分表字段.子表数量,
    比如:
    你的数据库名叫school,表名叫stu,分表字段叫id,总共分为2张表,那么就写为school.stu.id.2,如果还有其他的分表,以逗号分隔即可。

    7. 关于读写分离建议软件

    同类中间件proxySQL,此前已使用过,目前比较火,是percona推的
    还有maxscale,是mariaDB的
    还有官方的MySQL Router,是MySQL官方的
    atlas即将成为历史

    MySQL-Router ---> MySQL官方
    ProxySQL --->Percona
    Maxscale ---> MariaDB

    相关文章

      网友评论

          本文标题:MySQL MHA+Atlas 读写分离架构

          本文链接:https://www.haomeiwen.com/subject/qfqliltx.html