美文网首页
(16)mysql瓶颈 & MGR和一致性读 性能测试

(16)mysql瓶颈 & MGR和一致性读 性能测试

作者: hedgehog1112 | 来源:发表于2020-11-14 23:40 被阅读0次

一、单机mysql瓶颈

1、支撑多少数据?多少张表?

容量:看硬件

    InnoDB 最大容量64TB,存储引擎将InnoDB 保存在一个表空间内(原始磁盘分区,由数个文件创建)。这样,表大小能超过单独文件最大容量

    MySQL 3.22(MyISAM)限制表大小4GB,最大表尺寸增加到65536TB(2567 – 1字节)。最大有效表尺寸通常是由操作系统文件大小限制决定的,不是由MySQL内部限制决定。

最多20亿个表,一个表允许定义1024列,每行的最大长度为8092字节(不包括文本和图像类型的长度);

2、单表数据不超过500万行:是经验数值,还是黄金铁律?

阿里《Java 开发手册》提出单表行> 500w 容量>2GB,才分库分表

与 MySQL 配置及硬件有关,实际记录的条数无关。因为表索引装载到内存,InnoDB buffer size 足够,才能全加载进内存,查没问题。达量级限时,导致内存无法存储索引,产生磁盘 IO,性能下降。增加硬件配置解决。500w算折中

3、qps

QPS在8400左右:400个线程并发,插入100万条记录(4核2.33G、3G内存、SATA硬盘)https://www.iteye.com/blog/wwtang9527-1718292

写:90-100M/S(机械硬盘,7200转)预计kB_wrtn/s在90M左右

https://www.cnblogs.com/zhiqian-ali/p/6336521.html

4、mysql支撑多少连接数?

show variables like 'max_connections'  mysql当前最大连接数

set global max_connections=1000;  设置当前最大连接数为1000;mysql重启时失效,需要长期生效在my.ini 添加 max_connections=1000

二、MGR和一致性读 性能测试

从业务使用场景出发,根据RDS套餐类型和线上实际访问流量,来衡量性能指标,以便方便对标实际业务场景。

环境

测试方法

MySQL 5.7.21 Group Replication

MySQL 5.7.21 Group Replication with Consistent Read

同机房3节点、跨机房3节点

网络异常:长时间延时0.5ms,长时间延时2ms,丢包0.01%

场景1、2的差异可以衡量跨机房网络带来的性能损耗

场景3关注在网络质量变化时带来的性能变化

同机房3节点为 05 06 03    跨机房3节点为 05 06 01

机器部署:同IDC3台(永顺ys 03 05 06),跨IDC1台(广州gz 01)

正常的网络质量:

同IDC RTT(06->05):RTT min/avg/max/mdev = 0.051/0.059/0.070/0.010 ms

跨IDC RTT(01->05):RTT min/avg/max/mdev = 0.739/0.749/0.810/0.027

    跨IDC的网络耗时是同IDC的1.3倍,在设置延迟0.5ms后的网络质量:

同IDC RTT(06->05):RTT min/avg/max/mdev = 0.507/0.564/0.617/0.037

跨IDC RTT(01->05):RTT min/avg/max/mdev = 1.199/1.248/1.315/0.046

    跨IDC的网络耗时是同IDC的2.2倍,在设置延迟2ms后的网络质量:

同IDC RTT(06->05):RTT min/avg/max/mdev = 1.963/2.054/2.161/0.064 ms

跨IDC RTT(01->05):RTT min/avg/max/mdev = 2.642/2.732/2.835/0.076 ms

参考:http://blog.720ui.com/2019/mysql_why_one_table_500w/?spm=a2c4e.10696291.0.0.26e819a4zY3hrA&aliyun

https://my.oschina.net/u/867417/blog/758690

相关文章

  • (16)mysql瓶颈 & MGR和一致性读 性能测试

    一、单机mysql瓶颈 1、支撑多少数据?多少张表? 容量:看硬件 InnoDB最大容量64TB,存储引擎将In...

  • 5.7.20 多实例——MGR部署实战

    多实例——MGR部署实战 MGR介绍 基于传统异步复制和半同步复制的缺陷——数据的一致性问题无法保证,MySQL官...

  • MGR测试报告

    1. MGR背景 MySQL Group Replication 是MySQL官方提供的强一致性存储方案,可以很方...

  • 数据库事务优化-乐观锁

    最近优化一个接口的性能,发现是为了保证数据一致性,需要依赖数据库事务。所以MySQL成为了性能的瓶颈。 业务需求:...

  • MySQL组复制

    一. 什么是MGR MGR(MySQL Group Replication)是MySQL官方在MySQL 5.7...

  • MySQL基准测试

    MySQL基准测试 原因 测试评估出当前系统的运行情况,建立性能基准线; 模拟更高负载,找出扩展性瓶颈; 规划未来...

  • MySQL MGR集群原理及实践

    一、MGR简介 MGR全称MySQL Group Replication(Mysql组复制),是MySQL官方于2...

  • MySQL MGR集群实践

    1、MGR说明 MGR全称MySQL Group Replication(Mysql组复制),是MySQL官方于2...

  • 性能瓶颈分析案例

    性能分析案例一 在性能测试过程中,瓶颈犹如功能测试的bug,瓶颈的分析犹如bug的定位。性能测试工程师好比医生,...

  • 基准测试(一)

    mysql性能测试。 一、mysqlslap mysqlslap是mysql自带的性能测试工具。 mysqlsla...

网友评论

      本文标题:(16)mysql瓶颈 & MGR和一致性读 性能测试

      本文链接:https://www.haomeiwen.com/subject/tmqzzhtx.html