【ceph学习】rados bench性能测试工具介绍

2024-08-29 04:44

本文主要是介绍【ceph学习】rados bench性能测试工具介绍,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

rados bench性能测试工具介绍

  1. radosbench介绍
    Ceph 包含 rados bench 命令,用于在 RADOS 存储群集上执行性能基准测试。命令将执行写入测试,以及两种类型的读测试。在测试读取和写入性能时,–no-cleanup 选项非常重要。默认情况下,rados bench 命令会删除它写入存储池的对象。保留这些对象后,可以使用两个读取测试来测量顺序读取和随机读取的性能。

  2. 命令及参数

  • 读写命令
rados bench -p <pool_name> <run_time> <mode> [options]
  • 必选参数定义

    • pool_name:测试操作的池名字。
    • run_time:测试持续时长(单位为秒)。
    • mode:测试模式。取值有 write、seq 和 rand。其中 write 是写(Rados 没有顺序写或随机写之分),seq 和 rand 分别表示顺序读和随机读。
  • options其他参数

    • -c:Ceph 配置文件路径。如果使用的不是默认的 Ceph 配置文件 /etc/ceph/ceph.conf,则需要指定。
    • -b:write 模式中操作的块大小(block size),单位字节。默认为 4194304(4 MB)。
    • -O:write 模式中操作的对象大小(object size),单位字节。默认等于 -b。
    • –max-objects:write 模式中的最大的对象数量。设定此参数后,写到最大数量测试就会停止(可能会超出一些),否则会继续执行直到达到 seconds 时间。
    • -t:并发操作数。默认为 16。
    • –no-cleanup:write 模式中,在写入测试完成后删除不测试数据。不加此参数时,write 测试完成后测试数据会被删除,如果后面还要进行读测试的话,需要加这个参数保留数据。
    • -f:执行输出的格式。取值有 plain(默认)、json 和 json-pretty。
    • –run-name:本次测试的名字,这个名字和测试时拼接的 key 名字有关。默认为 “benchmark_last_metadata”。
    • –reuse-bench:write 模式中复用上一次的测试对象。不同的测试会有不同的对象前缀,加这个参数以后还用上一次的前缀,但前提是上一次测试加了 --no-cleanup 参数。
    • –show-time:在每一条输出前都加上日期/时间 data/time 前缀。
    • –no-verify:读对象的时候不验证内容。
    • –write-object:指定向对象中写入的内容。
    • –write-omap:指定向 omap 中写入的内容。
    • –write-xattr:指定向 extended attributes 中写入的内容。
  • 清理数据

如果我们在写测试中添加了 --no-cleanup 参数不清理数据,那么后面当我们不需要的时候,还需要使用子命令 cleanup 来删除这些数据:

rados cleanup [--run-name run_name] [--prefix prefix]
  • –run-name :写入测试时如果添加了这个参数,这里要添加一样的。默认也是 “benchmark_last_metadata”。
  • –prefix:要清理对象的前缀。

每次进行写入测试的时候,写入的对象都会有一个前缀,例如 benchmark_data_myhostname_3742558,前面是固定的 benchmark_data_,中间是机器的 host 名字,末尾是一串数字(看着应该是跟时间有关,因为可以排序),这个前缀会在 write 测试时会打印出来。

当多次执行带有 --no-cleanup 的写入测试后,池里就会存在很多个不同的前缀的对象。可以通过指定前缀,清理特定某一次测试写入的数据。如果不指定前缀,则默认清理最后一次写入测试的数据。

  1. 结果分析
  • 命令执行情况
ceph@node2:/$ rados bench -p rbd  1200  write -b 40960 -t 16  --no-cleanup
/*参数说明*/
hints = 1
Maintaining 16 concurrent writes of 40960 bytes to objects of size 40960 for up to 1200 seconds or 0 objects
/*对象前缀*/
Object prefix: benchmark_data_node2_139690
/*实时打印性能数据*/sec Cur ops   started  finished  avg MB/s  cur MB/s last lat(s)  avg lat(s)0       0         0         0         0         0           -           01      16      1844      1828   71.4017   71.4062  0.00784974  0.008717872      16      3701      3685   71.9665   72.5391  0.00709388  0.008662393      16      5441      5425   70.6316   67.9688   0.0146895  0.008833164      16      7007      6991   68.2651   61.1719   0.0136184  0.009131085      16      8538      8522   66.5717   59.8047  0.00318715  0.009355576      16      9344      9328   60.7231   31.4844   0.0190202   0.01023987      16      9977      9961   55.5803   24.7266    0.010927   0.01120538      16     10518     10502   51.2741   21.1328   0.0439235   0.01216249      16     11280     11264   48.8839   29.7656   0.0717894   0.012730310      16     12045     12029   46.9835   29.8828  0.00995933   0.013281111      16     12918     12902    45.812   34.1016   0.0134464    0.01362412      16     13815     13799   44.9139   35.0391  0.00909432   0.013899113      16     14640     14624   43.9377   32.2266  0.00318153   0.014142114      16     15278     15262   42.5792   24.9219   0.0183044   0.0146673

示例中是写数据的bench数据结果。每列的含义如下:

  • sec:当前执行的秒数。

  • Cur ops:当前的并发操作数。这个值一般就是 -t 的值,可能小一点(跟执行情况有关)。

  • started:截至当前的已经开始写入的对象数。

  • finished:截至当前的已经完成写入的对象数。

  • avg MB/s:平均带宽。单位 MB/s。

  • cur MB/s:当前带宽。单位 MB/s。

  • last lat(s):当前延迟。单位秒。

  • avg lat(s):平均延迟。单位秒。

  • 最终性能结果:

Total time run:         1200.02
Total writes made:      1443431
Write size:             40960
Object size:            40960
Bandwidth (MB/sec):     46.9861
Stddev Bandwidth:       15.8027
Max bandwidth (MB/sec): 73.4375
Min bandwidth (MB/sec): 0
Average IOPS:           1202
Stddev IOPS:            404.55
Max IOPS:               1880
Min IOPS:               0
Average Latency(s):     0.0132992
Stddev Latency(s):      0.0341294
Max latency(s):         4.61661
Min latency(s):         0.00265286
  • Total time run:总测试运行时间。
  • Total writes made:总测试写入对象数。
  • Write size:写入时的 block 大小。单位字节。
  • Object size:写入时的对象大小。单位字节。
  • Bandwidth (MB/sec):平均带宽。单位 MB/sec。
  • Stddev Bandwidth:带宽标准差。
  • Max bandwidth (MB/sec):最大带宽。单位 MB/sec。
  • Min bandwidth (MB/sec):最小带宽。单位 MB/sec。
  • Average IOPS:平均 IOPS。
  • Stddev IOPS:IOPS 标准差。
  • Max IOPS:最大 IOPS。
  • Min IOPS:最小 IOPS。
  • Average Latency(s):平均延迟。单位秒。
  • Stddev Latency(s):延迟标准差。单位秒。
  • Max latency(s):最大延迟。单位秒。
  • Min latency(s):最小延迟。单位秒。
  1. 总结
    radosbench是一个可以直接往存储池进行压测数据的工具,绕过了前段的文件、对象、块等协议层的处理。适用于预埋数据,以及测试osd性能等场景。

这篇关于【ceph学习】rados bench性能测试工具介绍的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1116877

相关文章

5 种使用Python自动化处理PDF的实用方法介绍

《5种使用Python自动化处理PDF的实用方法介绍》自动化处理PDF文件已成为减少重复工作、提升工作效率的重要手段,本文将介绍五种实用方法,从内置工具到专业库,帮助你在Python中实现PDF任务... 目录使用内置库(os、subprocess)调用外部工具使用 PyPDF2 进行基本 PDF 操作使用

Docker多阶段镜像构建与缓存利用性能优化实践指南

《Docker多阶段镜像构建与缓存利用性能优化实践指南》这篇文章将从原理层面深入解析Docker多阶段构建与缓存机制,结合实际项目示例,说明如何有效利用构建缓存,组织镜像层次,最大化提升构建速度并减少... 目录一、技术背景与应用场景二、核心原理深入分析三、关键 dockerfile 解读3.1 Docke

从原理到实战解析Java Stream 的并行流性能优化

《从原理到实战解析JavaStream的并行流性能优化》本文给大家介绍JavaStream的并行流性能优化:从原理到实战的全攻略,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的... 目录一、并行流的核心原理与适用场景二、性能优化的核心策略1. 合理设置并行度:打破默认阈值2. 避免装箱

Java中HashMap的用法详细介绍

《Java中HashMap的用法详细介绍》JavaHashMap是一种高效的数据结构,用于存储键值对,它是基于哈希表实现的,提供快速的插入、删除和查找操作,:本文主要介绍Java中HashMap... 目录一.HashMap1.基本概念2.底层数据结构:3.HashCode和equals方法为什么重写Has

深度剖析SpringBoot日志性能提升的原因与解决

《深度剖析SpringBoot日志性能提升的原因与解决》日志记录本该是辅助工具,却为何成了性能瓶颈,SpringBoot如何用代码彻底破解日志导致的高延迟问题,感兴趣的小伙伴可以跟随小编一起学习一下... 目录前言第一章:日志性能陷阱的底层原理1.1 日志级别的“双刃剑”效应1.2 同步日志的“吞吐量杀手”

Unity新手入门学习殿堂级知识详细讲解(图文)

《Unity新手入门学习殿堂级知识详细讲解(图文)》Unity是一款跨平台游戏引擎,支持2D/3D及VR/AR开发,核心功能模块包括图形、音频、物理等,通过可视化编辑器与脚本扩展实现开发,项目结构含A... 目录入门概述什么是 UnityUnity引擎基础认知编辑器核心操作Unity 编辑器项目模式分类工程

Springboot项目构建时各种依赖详细介绍与依赖关系说明详解

《Springboot项目构建时各种依赖详细介绍与依赖关系说明详解》SpringBoot通过spring-boot-dependencies统一依赖版本管理,spring-boot-starter-w... 目录一、spring-boot-dependencies1.简介2. 内容概览3.核心内容结构4.

Python学习笔记之getattr和hasattr用法示例详解

《Python学习笔记之getattr和hasattr用法示例详解》在Python中,hasattr()、getattr()和setattr()是一组内置函数,用于对对象的属性进行操作和查询,这篇文章... 目录1.getattr用法详解1.1 基本作用1.2 示例1.3 原理2.hasattr用法详解2.

Java慢查询排查与性能调优完整实战指南

《Java慢查询排查与性能调优完整实战指南》Java调优是一个广泛的话题,它涵盖了代码优化、内存管理、并发处理等多个方面,:本文主要介绍Java慢查询排查与性能调优的相关资料,文中通过代码介绍的非... 目录1. 事故全景:从告警到定位1.1 事故时间线1.2 关键指标异常1.3 排查工具链2. 深度剖析:

深入解析Java NIO在高并发场景下的性能优化实践指南

《深入解析JavaNIO在高并发场景下的性能优化实践指南》随着互联网业务不断演进,对高并发、低延时网络服务的需求日益增长,本文将深入解析JavaNIO在高并发场景下的性能优化方法,希望对大家有所帮助... 目录简介一、技术背景与应用场景二、核心原理深入分析2.1 Selector多路复用2.2 Buffer