1. 概念
基准测试是针对系统设置的一种压力测试
- 基准测试:直接、简单、易于比较、用于评估服务器的处理能力。不关心业务逻辑,所使用的数据和查询也是真实用不到的。
- 压力测试:对真实的业务数据进行测试,获得真实系统所能承受的压力。针对不同主题,所用到的数据和查询也是真实用到的。
2. 基准测试的目的
- 建立MySQL服务器的性能基准线
- 模拟比当前系统更高的负载,找出系统扩展瓶颈。
- 增加数据库并发,观察QPS,TPS变化,确定并发量与性能最优的关系。
- 测试不同的硬件、软件和操作系统配置
3. 如何进行基准测试
对整个系统进行基准测试
优点:
- 能够测试整个系统的性能,包括web服务器、缓存、数据库等
- 能反映出系统中各个组件接口间的性能问题体现真实性能状况
缺点:
- 测试设计复杂,消耗时间长。
单独对MySQL进行基准测试
优点:
- 测试设计简单,耗时短
缺点:
- 无法全面了解整个系统的性能基线
MySQL基准测试常见指标
- TPS:单位时间所处理的事务数
- QPS:单位时间所处理的查询数
- 响应时间
- 并发量:同时处理的查询请求数量(并发量不等于连接数)
4. 基准测试的步骤
计划和设计基准测试
- 对整个系统还是某一组件
- 使用什么样的数据
- 准备基准测试及数据收集脚本,CPU使用率、IO、网络流量、状态与计数器信息等
基准测试中容易忽略的问题
- 使用生产环境数据时只使用了部分数据(推荐使用数据库完全备份来测试)
- 在多用户场景,只做单用户测试
- 在单服务器上测试分布式应用
- 反复执行同一查询
常用的基准测试工具
mysqlslap
- MySQL服务器自带
- 可以模拟服务器负载,并输出相关统计信息
- 可以指定也可以自动生成查询语句
常用参数说明
auto-generate-sql由系统自动生成SQL脚本进行测试auto-generate-sql-add-autoincrement在生成的表中增加自增IDauto-generate-sql-load-type指定测试中使用的查询类型auto-generate-sql-write-number指定初始化数据时生成的数据量concurrency指定并发线程数量engine指定要测试表的存储引擎,可以用逗号分割多个存储引擎no-drop指定不清理测试数据iterations指定测试运行次数number-of-queries指定每一个线程执行的查询数量debug-info指定输出额外的内存及CPU统计信息number-int-cols指定测试表中包含的INT类型列的数量number-char-cols指定测试表中包含的VARCHAR类型的数量create-schema指定了用于执行测试的数据库名字query用于指定自定义SQL脚本only-print并不运行测试脚本,而是把生成的脚本daying