51. Python语言 的 MySQL数据库 之 第二十章 MySQL的 基准测试

2023-12-29 08:58

本文主要是介绍51. Python语言 的 MySQL数据库 之 第二十章 MySQL的 基准测试,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

MySQL的 基准测试

  • 本章主题
  • 关键词
  • 什么是基准测试
    • 基准测试特点
    • 压力测试特点
  • 基准测试的目的
  • 如何进行基准测试
    • 对整个系统进行基准测试
      • 优点
      • 缺点
    • 对MySQL进行基准测试
      • 优点
      • 缺点
    • MySQL基准测试的常见指标
  • MySQL基准测试工具
    • MySQL基准测试之mysqlslap
    • 常用参数说明
    • sysbench测试工具:
  • 总结小便条

本章主题

  

关键词

  

什么是基准测试

基准测试是一种测量和评估软件性能指标的活动用于建立某个时刻的性能基准,以便当系统发生软硬件变化时重新进行基准测试以评估变化对性能的影响。

基准测试是针对系统设置的一种压力测试

基准测试特点

直接、简单、易于比较,用于评估服务器的处理能力

可能不关心业务逻辑,所使用的查询和业务的真实性可以和业务环境没关系

压力测试特点

• 对真实的业务数据进行测试,获得真实系统所能承受的压力

• 需要针对不同主题,所使用的数据和查询也是真实用到的

• 基准测试是简化了的压力测试

  

基准测试的目的

• 建立MySQL服务器的性能基准线,确定当前MySQL服务器运行情况,确定优化之后的效果

• 模拟比当前系统更高的负载,已找出系统的扩展瓶颈,可以增加数据库并发,观察QPS(每秒处理的查询数),TPS(每秒处理的事务数)变化,确定并发量与性能最优的关系

• 测试不同的硬件、软件和操作系统配置

• 证明新的硬件设备是否配置正确

  

如何进行基准测试

对整个系统进行基准测试

优点

• 能够测试整个系统的性能,包括web服务器缓存、数据库等

• MySQL并不总是出现性能问题的瓶颈,如果只关注MySQL可能忽略其他问题,能反映出系统中各个组件接口间的性能问题体现真实性能状况

缺点

基准测试最重要的就是简单,可能对不同的方案进行测试,找到最优的方案,基准测试进行的时间一定要短,否则就要花费大量的时间进行基准测试

• 测试设计复杂,消耗时间长

  

对MySQL进行基准测试

优点

• 测试设计简单,所耗费时间短

缺点

• 无法全面了解整个系统的性能基线

  

MySQL基准测试的常见指标

• 单位时间内处理的事务数(TPS)

• 单位时间内处理的查询数(QPS)

  

MySQL基准测试工具

MySQL基准测试之mysqlslap

• 可以模拟服务器负载,并输出相关统计信息

  

常用参数说明

• --auto-generate-sql 由系统自动生成SQL脚本进行测试
• --auto-generate-sql-add-autoincrement 在生成的表中增加自增ID
• --auto-generate-sql-load-type 指定测试中使用的查询类型 读写或者混合,默认是混合
• --auto-generate-sql-write-number 指定初始化数据时生成的数据量
• --concurrency 指定并发线程的数量 1,10,50,200
• --engine 指定要测试表的存储引擎,可以用逗号分割多个存储引擎
• --no-drop 指定不清理测试数据
• --iterations 指定测试运行的次数 指定了这个不能指定no-drop
• --number-of-queries 指定每一个线程执行的查询数量
• --debug-info 指定输出额外的内存及CPU统计信息
• --number-int-cols 指定测试表中包含的INT类型列的数量
• --number-char-cols 指定测试表中包含的varchar类型的数量
• --create-schema 指定了用于执行测试的数据库的名字
• --query 用于指定自定义SQL的脚本
• --only-print 并不运行测试脚本,而是把生成的脚本打印出来

mysqlslap --concurrency=1,50,100,200 --iterations=3 --number-int-cols=5 --number-char-cols=5 --auto-generate-sql --auto-generate-sql-add-autoincrement --engine=myisam,innodb --number-of-queries=10 --create-schema=test

  

sysbench测试工具:

https://www.cnblogs.com/kismetv/archive/2017/09/30/7615738.html

MyISAMInnoDB
存储结构每张表被存放在三个文件:
1. frm-表格定义;
2. MYD(MYData)-数据文件;
3. MYI(MYIndex)-索引文件。
所有的表都保存在同一个数据文件中(也可能是多个文件,或者是独立的表空间文件),InnoDB表的大小只受限于操作系统文件的大小,一般为2GB
存储空间MyISAM可被压缩,存储空间较小InnoDB的表需要更多的内存和存储,它会在主内存中建立其专用的缓冲池用于高速缓冲数据和索引
可移植性、备份及恢复由于MyISAM的数据是以文件的形式存储,所以在跨平台的数据转移中会很方便。在备份和恢复时可单独针对某个表进行操作免费的方案可以是拷贝数据文件、备份 binlog,或者用 mysqldump,在数据量达到几十G的时候就相对痛苦了
事务安全不支持 每次查询具有原子性支持 具有事务(commit)、回滚(rollback)和崩溃修复能力(crash recovery capabilities)的事务安全(transaction-safe (ACID compliant))型表
AUTO_INCREMENTMyISAM表可以和其他字段一起建立联合索引InnoDB中必须包含只有该字段的索引
SELECTMyISAM更优
INSERTInnoDB更优
UPDATEInnoDB更优
DELETEInnoDB更优 它不会重新建立表,而是一行一行的删除
COUNT without WHEREMyISAM更优。因为MyISAM保存了表的具体行数InnoDB没有保存表的具体行数,需要逐行扫描统计,就很慢了
COUNT with WHERE一样一样,InnoDB也会锁表
只支持表锁支持表锁、行锁 行锁大幅度提高了多用户并发操作的新能。但是InnoDB的行锁,只是在WHERE的主键是有效的,非主键的WHERE都会锁全表的
外键不支持支持
FULLTEXT全文索引支持不支持 可以通过使用Sphinx从InnoDB中获得全文索引,会慢一点

  

总结小便条

本篇文章主要讲了以下几点内容:

  

  本章回顾暂时就到这了,如果还有点晕,那就把文章里所有引用的案例代码再敲几遍吧。拜拜~

这篇关于51. Python语言 的 MySQL数据库 之 第二十章 MySQL的 基准测试的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/549006

相关文章

Mysql数据库聚簇索引与非聚簇索引举例详解

《Mysql数据库聚簇索引与非聚簇索引举例详解》在MySQL中聚簇索引和非聚簇索引是两种常见的索引结构,它们的主要区别在于数据的存储方式和索引的组织方式,:本文主要介绍Mysql数据库聚簇索引与非... 目录前言一、核心概念与本质区别二、聚簇索引(Clustered Index)1. 实现原理(以 Inno

sqlserver、mysql、oracle、pgsql、sqlite五大关系数据库的对象名称和转义字符

《sqlserver、mysql、oracle、pgsql、sqlite五大关系数据库的对象名称和转义字符》:本文主要介绍sqlserver、mysql、oracle、pgsql、sqlite五大... 目录一、转义符1.1 oracle1.2 sqlserver1.3 PostgreSQL1.4 SQLi

使用python生成固定格式序号的方法详解

《使用python生成固定格式序号的方法详解》这篇文章主要为大家详细介绍了如何使用python生成固定格式序号,文中的示例代码讲解详细,具有一定的借鉴价值,有需要的小伙伴可以参考一下... 目录生成结果验证完整生成代码扩展说明1. 保存到文本文件2. 转换为jsON格式3. 处理特殊序号格式(如带圈数字)4

MySQL数据库双机热备的配置方法详解

《MySQL数据库双机热备的配置方法详解》在企业级应用中,数据库的高可用性和数据的安全性是至关重要的,MySQL作为最流行的开源关系型数据库管理系统之一,提供了多种方式来实现高可用性,其中双机热备(M... 目录1. 环境准备1.1 安装mysql1.2 配置MySQL1.2.1 主服务器配置1.2.2 从

SpringBoot基于注解实现数据库字段回填的完整方案

《SpringBoot基于注解实现数据库字段回填的完整方案》这篇文章主要为大家详细介绍了SpringBoot如何基于注解实现数据库字段回填的相关方法,文中的示例代码讲解详细,感兴趣的小伙伴可以了解... 目录数据库表pom.XMLRelationFieldRelationFieldMapping基础的一些代

从基础到高级详解Go语言中错误处理的实践指南

《从基础到高级详解Go语言中错误处理的实践指南》Go语言采用了一种独特而明确的错误处理哲学,与其他主流编程语言形成鲜明对比,本文将为大家详细介绍Go语言中错误处理详细方法,希望对大家有所帮助... 目录1 Go 错误处理哲学与核心机制1.1 错误接口设计1.2 错误与异常的区别2 错误创建与检查2.1 基础

Python版本信息获取方法详解与实战

《Python版本信息获取方法详解与实战》在Python开发中,获取Python版本号是调试、兼容性检查和版本控制的重要基础操作,本文详细介绍了如何使用sys和platform模块获取Python的主... 目录1. python版本号获取基础2. 使用sys模块获取版本信息2.1 sys模块概述2.1.1

一文详解Python如何开发游戏

《一文详解Python如何开发游戏》Python是一种非常流行的编程语言,也可以用来开发游戏模组,:本文主要介绍Python如何开发游戏的相关资料,文中通过代码介绍的非常详细,需要的朋友可以参考下... 目录一、python简介二、Python 开发 2D 游戏的优劣势优势缺点三、Python 开发 3D

Python函数作用域与闭包举例深度解析

《Python函数作用域与闭包举例深度解析》Python函数的作用域规则和闭包是编程中的关键概念,它们决定了变量的访问和生命周期,:本文主要介绍Python函数作用域与闭包的相关资料,文中通过代码... 目录1. 基础作用域访问示例1:访问全局变量示例2:访问外层函数变量2. 闭包基础示例3:简单闭包示例4

Python实现字典转字符串的五种方法

《Python实现字典转字符串的五种方法》本文介绍了在Python中如何将字典数据结构转换为字符串格式的多种方法,首先可以通过内置的str()函数进行简单转换;其次利用ison.dumps()函数能够... 目录1、使用json模块的dumps方法:2、使用str方法:3、使用循环和字符串拼接:4、使用字符