美文网首页
事物四大特性实现原理, 日志,数据备份,主从复制,高可用架构与高

事物四大特性实现原理, 日志,数据备份,主从复制,高可用架构与高

作者: aq_wzj | 来源:发表于2019-01-16 19:54 被阅读0次

    事物四大特性实现原理:

    mysql中其实还存了redo 与 undo,

    undo记录了事物开始时的状态, 如果回滚, 就能根据undo回到当初的状态, 从而实现原子性,一致性

    redo在commit时记录事物里做的操作, 实现持久性

    1. 日志

    1. 错误日志

      在mysql的配置文件中的[mysqld]配置路径
      vim /etc/my.cnf
      log_error=/var/log/mysql.log
      
      cat /var/log/mysql.log
      分析其中的[error]
      
    2. 二进制日志 (binlog,逻辑型日志)

      1. 作用: 记录所有变更类的语句
          DDL,DCL :以语句方式(statement)记录
          DML(已提交的事务语句):默认是以行模式记录(row模式,数据行的变化)
          可以做数据恢复和操作的审计
      2. 配置方法
       在mysql的配置文件中的[mysqld]配置路径
       vim /etc/my.cnf
       log_bin=/opt/mysql/data/mysql-bin
       binlog_format=row
       server_id=6
          sync_binlog=1
        如果上面五行报错的话, 换成下面三行
           server-id=11
           log_bin=mysql-bin 
           datadir=/var/lib/mysql
      3. 查看日志信息
       mysql> show binary logs;
       mysql> show master status;
      4. 日志内容查看
       按事件查看日志内容
       mysql> show binlog events in 'mysql-bin.000012';
       直接查看日志内容
       [root@standby data]# mysqlbinlog --base64-output=decode-rows -vvv /opt/mysql/data/mysql-bin.000012 |more
      5. 截取二进制日志(截取mysql-bin.000012下的219到186613条记录)
       [root@standby data]# mysqlbinlog --start-position=219 --stop-position=186613 /opt/mysql/data/mysql-bin.000012 >/tmp/binlog.sql
      
    3. 慢日志(slow-log): 查询时长超过一定时间的查询语句会被记录

      配置
      slow_query_log=1
      slow_query_log_file=/opt/mysql/data/standby-slow.log
      long_query_time=1    
      log_queries_not_using_indexes=1
      
      使用Box
      Anemometer基于pt-query-digest将MySQL慢查询可视化
      
      

    2. 数据备份

    1. 将表t1数据存到txt文件中
    mysql> select xxxx from t1  into outfile '/tmp/redis.txt'
    
    2. 将表t1数据存到Redis中
    [root@standby /]# mysql -uroot -p123 -e "select concat(
                        'hmset city_',id,' id ', id,
                        ' name ',name,' countrycode ',countrycode,
                        ' district ',district,' population ',population
                      ) from world.city limit 10 "|redis-cli
     
    3. mysqldump 工具 
    3.1 全库备份 , 备份sql语句
    [root@standby /]# mysqldump -uroot -p123 -A >/backup/full.sql
     
    3.2 备份一个或多个指定库
    [root@standby /]# mysqldump -uroot -p123 -B world bbs  >/backup/wb.sql
     
    3.3 备份单库中的表
    mysqldump -uroot -p123  world city country  >/backup/ccc.sql
    
    --master-data=2       备份时记录二进制日志的状态
    --single-transaction  开启innodb热备功能
    -R 
    --triggers
    
    完整备份语句 
    [root@standby /]# 
    mysqldump -uroot -p123 -A --master-data=2 --single-transaction -R --triggers >/backup/full.sql
    

    3. 主从复制

    两台服务器A与B , A为主服务器, B为从服务器 , A与B保持一比一的状态, 当A服务器挂了立马切换B服务器

    基于二进制日志完成的

    首先创建两个mysql实例 https://www.jianshu.com/p/e1337510327b

    主 ------> 从
    3307---->3308

    1. 主库的操作
    主库开启二进制日志
    vim /data/3307/my.cnf 
    log_bin=/data/3307/mysql-bin
    
    启动3307
    [root@standby 3307]# systemctl restart mysqld3307
    
    3307中创建复制用户
    [root@standby backup]# mysql -S /data/3307/mysql.sock
    grant replication slave on *.* to repl@'10.0.0.%' identified by '123';
    
    查看3307状态, 
    mysql> show master status;
    +------------------+----------+--------------+------------------+-------------------+
    | File             | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |
    +------------------+----------+--------------+------------------+-------------------+
    | mysql-bin.000001 |      154 |              |                  |                   |
    +------------------+----------+--------------+------------------+-------------------+
    
    File 为当前使用的2进制日志
    Position 为最新的数据位置
    
    2. 从库操作
    3308节点开启主从复制功能
    [root@standby 3307]# mysql -S /data/3308/mysql.sock
    mysql> CHANGE MASTER TO
      MASTER_HOST='10.0.0.200',  # 主库的ip
      MASTER_USER='repl',    # 之前创建的复制用户的username
      MASTER_PASSWORD='123', # 之前创建的复制用户的PASSWORD
      MASTER_PORT=3307,      # 主库端口号
      # 一下两个为之前主库查到的状态值, 也就是从主库的这个位置开始同步
      MASTER_LOG_FILE='mysql-bin.000001',  
      MASTER_LOG_POS=154;
      
     mysql> start slave; # 开启从库
     mysql> show slave status\G 查看从库的状态
     
     如果从库的状态有以下两个代表ok了
     Slave_IO_Running: Yes
     Slave_SQL_Running: Yes
    

    4. 高可用架构与高性能架构

    1. 高可用架构的分级29级 , 39级 , 49级 , 59级

      层级 每年工作的时间占比 一年down机时间 评价
      29级 99% 1%*365D=3.65D = 87.6h 垃圾, 没法用
      39级 99.9% 0.1%*365D = 8.76h 比较好
      49级 99.99% 0.876h = 52.56min 比较牛逼
      59级 99.999% 5. 256min 很牛逼了
    2. MySQL高可用架构介绍

      MHA
      MGR + Mysql router + mysql shell===>Mysql Innodb Cluster==>mongodb sharding cluster
      PXC
      galera cluster
      
    3. 高性能架构

      读写分离中间件
          atlas  360在用   C++编写
          maxscale mariadb
          proxySQL 
          DRDS(需要购买, 阿里的产品)
          mysql router
          
      分布式架构
       分片集群中间件
           Mycat 
              DBLE 
              TDDL
              DRDS
      

    相关文章

      网友评论

          本文标题:事物四大特性实现原理, 日志,数据备份,主从复制,高可用架构与高

          本文链接:https://www.haomeiwen.com/subject/oelvdqtx.html