MySQL性能指标TPS+QPS+IOPS压测


Posted in MySQL onAugust 05, 2022

前言

今天主要介绍MySQL数据库,或者说所有数据库的三个关键性能指标TPS\QPS\IOPS

1. 性能指标概览

QPS(Queries Per Second)就是每秒的查询数,对数据库而言就是数据库每秒执行的 SQL 数(含 insert、select、update、delete 等)。
TPS(Transactions Per Second)就是每秒的事务数。TPS 对于数据库而言就是数据库每秒执行的事务数,以 commit 成功次数为准。
IOPS 每秒磁盘进行的I/O操作次数

2. 指标计算方式

2.1 TPS

适用innodb Transactions Per Second(每秒传输的事物处理个数),即服务器每秒处理的事务数
一般的,评价系统性能均以每秒钟完成的技术交易的数量来衡量。系统整体处理能力取决于处理能力最低模块的TPS值

mysql> SHOW GLOBAL STATUS LIKE 'Com_commit';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| Com_commit    | 22402 |
+---------------+-------+
1 row in set (0.00 sec)

mysql> SHOW GLOBAL STATUS LIKE 'Com_rollback';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| Com_rollback  | 0     |
+---------------+-------+
1 row in set (0.00 sec)
mysql> SHOW GLOBAL STATUS LIKE 'Uptime'
    -> ;
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| Uptime        | 3319  |
+---------------+-------+
1 row in set (0.01 sec)
TPS=(Com_commit + Com_rollback)/Uptime

MySQL性能指标TPS+QPS+IOPS压测

2.2 QPS

同时适用与InnoDB和MyISAM 引擎 每秒查询率QPS是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准 对应fetches/sec,即每秒的响应请求数,也即是最大吞吐能力

MySQL性能指标TPS+QPS+IOPS压测

2.3 IOPS

IOPS (Input/Output Per Second)即每秒的输入输出量(或读写次数),是衡量磁盘性能的主要指标之一。IOPS是指单位时间内系统能处理的I/O请求数量,一般以每秒处理的I/O请求数量为单位,I/O请求通常为读或写数据操作请求。随机读写频繁的应用,如OLTP(Online Transaction Processing),IOPS是关键衡量指标。另一个重要指标是数据吞吐量(Throughput),指单位时间内可以成功传输的数据数量。对于大量顺序读写的应用,如VOD(Video On Demand),则更关注吞吐量指标。 IOPS可细分为如下几个指标: Toatal IOPS,混合读写和顺序随机I/O负载情况下的磁盘IOPS,
这个与实际I/O情况最为相符,大多数应用关注此指标。
Random Read IOPS,100%随机读负载情况下的IOPS。
Random Write IOPS,100%随机写负载情况下的IOPS。
Sequential Read IOPS,100%顺序负载读情况下的IOPS。
Sequential Write IOPS,100%顺序写负载情况下的IOPS。
IOPS的测试benchmark工具主要有Iometer, IoZone, FIO等,可以综合用于测试磁盘在不同情形下的IOPS。对于应用系统,需要首先确定数据的负载特征,然后选择合理的IOPS指标进行测量和对比分析,据此选择合适的存储介质和软件系统。

理论上可以计算出磁盘的最大IOPS,即IOPS = 1000 ms/ (Tseek + Troatation),忽略数据传输时间。假设磁盘平均物理寻道时间为3ms, 磁盘转速为7200,10K,15K rpm,则磁盘IOPS理论最大值分别为,
IOPS = 1000 / (3 + 60000/7200/2) = 140
IOPS = 1000 / (3 + 60000/10000/2) = 167
IOPS = 1000 / (3 + 60000/15000/2) = 200

3. mysqlslap

3.1 压测

mysqlslap 是 MySQL 自带的一个用于实现负载性能测试和压力测试的工具。它可以模拟多个客户端对数据库进行施压,并生成报告来了解数据库的性能状况。
mysqlslap 的运行过程主要分三步:
① 创建库、表,导入数据用于测试。此过程由单线程完成。
② 开始进行压力测试。该步骤可以使用多线程完成。
③ 清理测试数据。此过程由单线程完成。

[root@jeames ~]# mysqlslap --help 

MySQL性能指标TPS+QPS+IOPS压测

3.2 案例

mysqlslap -uroot -proot -h192.168.1.54 -P3306 \
--create-schema=mysqlslap --auto-generate-sql \
--auto-generate-sql-load-type=mixed \
--concurrency=100,200 --number-of-queries=1000 \
--iterations=10 --number-int-cols=7 \
--number-char-cols=13 --auto-generate-sql-add-autoincrement

Benchmark
#运行所有语句的平均时间,单位秒
Average number of seconds to run all queries: 0.018 seconds
#运行所有语句的最小秒数
Minimum number of seconds to run all queries: 0.018 seconds
#运行所有语句的最大秒数
Maximum number of seconds to run all queries: 0.018 seconds
#客户端数量
Number of clients running queries: 1
#每个客户端运行查询的平均数
Average number of queries per client: 0

该语句表示测试并发为 100 和 200 的情况,进行 1000 次访问(该值一般这样预估出来:并发客户数×每客户查询次数)。这样的测试方法迭代 10 次,最终显示最大、
最小、平均值
其中:--debug-info,代表要额外输出 CPU 以及内存的相关信息。如果报错 Option 'debug-info' used, but is disabled 请取消 debug-info 参数
-number-int-cols=7 表示生成的表中必须有 7 个 int 类型的列
-number-char-cols=13 表示生成的表中必须有 13 个 char 类型的列
-concurrency 代表并发数量,多个可以用逗号隔开,concurrency=10,50,100, 并发连接线程数分别是 10、50、100 个并发。
--engines 代表要测试的引擎,可以有多个,用分隔符隔开。
--iterations 代表要运行这些测试多少次。
--auto-generate-sql 代表用系统自己生成的 SQL 脚本来测试。
--auto-generate-sql-load-type 代表要测试的是读还是写还是两者混合的(read,write,update,mixed)
--number-of-queries 代表总共要运行多少次查询。每个客户运行的查询数量可以用查询总数/并发数来计算。
--debug-info 代表要额外输出 CPU 以及内存的相关信息。
--number-int-cols :创建测试表的 int 型字段数量
--auto-generate-sql-add-autoincrement : 代表对生成的表自动添加 auto_increment 列,从 5.1.18 版本开始
--number-char-cols 创建测试表的 char 型字段数量。
--create-schema 测试的 schema,MySQL 中 schema 也就是 database。
--query 使用自定义脚本执行测试,例如可以调用自定义的一个存储过程或者 sql 语句来执行测试。
--only-print 查看语句做了什么。

MySQL性能指标TPS+QPS+IOPS压测

到此这篇关于MySQL性能指标TPS+QPS+IOPS压测的文章就介绍到这了,更多相关MySQL性能指标压测内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章希望大家以后多多支持三水点靠木!

MySQL 相关文章推荐
MySQL如何构建数据表索引
May 13 MySQL
MySQL 隔离数据列和前缀索引的使用总结
May 14 MySQL
MySQL中InnoDB存储引擎的锁的基本使用教程
May 26 MySQL
mysql 数据插入优化方法之concurrent_insert
Jul 01 MySQL
MySQL和Oracle批量插入SQL的通用写法示例
Nov 17 MySQL
一次Mysql update sql不当引起的生产故障记录
Apr 01 MySQL
Golang连接并操作MySQL
Apr 14 MySQL
MySQL sql模式设置引起的问题
May 15 MySQL
MySQL中EXPLAIN语句及用法
May 20 MySQL
MYSQL事务的隔离级别与MVCC
May 25 MySQL
深入理解MySQL中MVCC与BufferPool缓存机制
May 25 MySQL
MySQL如何修改字段类型和字段长度
Jun 10 MySQL
Mysql中mvcc各场景理解应用
Aug 05 #MySQL
数据设计之权限的实现
一文解答什么是MySQL的回表
Aug 05 #MySQL
MySQL一劳永逸永久支持输入中文的方法实例
Aug 05 #MySQL
SQLServer常见数学函数梳理总结
Aug 05 #MySQL
MySQL生成千万测试数据以及遇到的问题
Aug 05 #MySQL
面试官问我Mysql的存储引擎了解多少
You might like
PHP 创建文件(文件夹)以及目录操作代码
2010/03/04 PHP
ThinkPHP入口文件设置及相关注意事项分析
2014/12/05 PHP
PHP自定义多进制的方法
2016/11/03 PHP
PHP屏蔽关键字实现方法
2016/11/17 PHP
一个多次搜索+多次传值的解决方案
2007/01/20 Javascript
JQuery中如何传递参数如click(),change()等具体实现
2013/04/28 Javascript
js获取select标签的值且兼容IE与firefox
2013/12/30 Javascript
jquery遍历select元素(实例讲解)
2013/12/31 Javascript
css结合js制作下拉菜单示例代码
2014/02/27 Javascript
基于jQuery实现选取月份插件附源码下载
2015/12/28 Javascript
JavaScript解析JSON格式数据的方法示例
2017/01/24 Javascript
bootstrap响应式表格实例详解
2017/05/15 Javascript
详解JS中统计函数执行次数与执行时间
2018/09/04 Javascript
详解Howler.js Web音频播放终极解决方案
2020/08/23 Javascript
修改NPM全局模式的默认安装路径的方法
2020/12/15 Javascript
Python的Django框架中if标签的相关使用
2015/07/15 Python
Python字符串特性及常用字符串方法的简单笔记
2016/01/04 Python
深入理解python中的atexit模块
2017/03/07 Python
django的登录注册系统的示例代码
2018/05/14 Python
python判断计算机是否有网络连接的实例
2018/12/15 Python
python最小生成树kruskal与prim算法详解
2019/01/17 Python
python操作kafka实践的示例代码
2019/06/19 Python
Python搭建Spark分布式集群环境
2019/07/05 Python
Python画图实现同一结点多个柱状图的示例
2019/07/07 Python
利用python生成照片墙的示例代码
2020/04/09 Python
Python判断字符串是否为空和null方法实例
2020/04/26 Python
基于Python爬取搜狐证券股票过程解析
2020/11/18 Python
python与idea的集成的实现
2020/11/20 Python
Python将QQ聊天记录生成词云的示例代码
2021/02/10 Python
韩国三星旗下的一家超市连锁店:Home Plus
2016/07/30 全球购物
高中毕业生的个人自我评价
2014/02/21 职场文书
公务员检讨书
2014/11/01 职场文书
2015年小学校长工作总结
2015/05/19 职场文书
入党介绍人考察意见
2015/06/01 职场文书
小学生红领巾广播稿
2015/08/19 职场文书
如何在Python中创建二叉树
2021/03/30 Python