iostat获取IO延迟单位从ms调整us的方案

2024-01-02 00:04

本文主要是介绍iostat获取IO延迟单位从ms调整us的方案,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

iostat命令统计的磁盘I/O延迟通常是以毫秒(ms)为单位,例如在输出中的await字段表示的是平均服务时间,包括等待时间和处理时间,这个值就是以毫秒为单位。

然而,要获取更精确到微秒级别(us)的磁盘I/O延迟信息,传统的iostat可能无法直接提供。Linux内核本身可以支持纳秒级的精度记录和查询,但iostat工具默认不显示这么详细的数据。

如果需要更详细的I/O延迟统计数据,可以考虑以下方法:

  1. 使用其他工具:比如 blktraceblkparse 工具组合可以提供非常详细的块设备请求级别的跟踪,包括每个请求的纳秒级精确延时。
  2. 直接读取/proc文件系统:
    • /sys/block/<device>/stat 文件包含了一些基于操作系统的统计信息,虽然不是所有数据都是微秒级的,但部分字段如“_io_ticks”可以间接推算出延迟。
    • /sys/block/<device>/queue/hw_sector_size/sys/block/<device>/queue/physical_block_size 以及 /sys/block/<device>/queue/logical_block_size 等可以获取磁盘块大小相关的信息,结合I/O次数和时间可以计算更细致的延迟。
  1. 内核调试接口或模块:对于特定场景,可能需要使用内核的debugfs或其他内核模块提供的更精细粒度的性能指标。
  2. 自定义脚本或工具:根据需求编写自定义脚本或工具,通过读取底层硬件提供的接口或者内核暴露的详细统计信息,实现对I/O延迟的微秒级别统计。

在Linux下获取us级别的IO读写延迟,可以利用blktraceblkparse工具进行跟踪分析。以下是一个简单的使用示例:

首先,通过blktrace收集I/O操作的详细信息:

sudo blktrace -d /dev/sda -o trace.dat

这里 /dev/sda 是你想要监控的块设备,替换为你实际需要监控的设备名。

然后,当完成所需的操作后,停止blktrace并使用blkparse解析收集的数据:

sudo blkparse -i trace.dat > parsed.txt

虽然blktrace和blkparse默认提供的是纳秒级(ns)的精度,但它们提供的数据量非常详细,你可以从中计算出每次I/O请求的精确延迟。

然而,如果编写一个直接从内核接口获取微秒级别延迟的C程序,那么这将涉及更复杂的内核编程,包括设置内核事件跟踪点、处理中断上下文以及解析硬件特定的计时器等。这样的程序通常不会短小简洁,而且对内核编程有较高的要求。

以下是一个简化的概念性伪代码,展示如何从内核角度追踪I/O延迟(请注意这并不是一个可以直接编译运行的完整程序,仅作为理解参考):

#include <linux/kernel.h>
#include <linux/hrtimer.h>
#include <linux/blkdev.h>struct io_trace {struct request *req;ktime_t start_time, end_time;
};static void io_start(struct request_queue *q, struct request *req)
{struct io_trace *trace = req->end_io_data;trace->req = req;trace->start_time = ktime_get();
}static void io_end(struct request *req)
{struct io_trace *trace = req->end_io_data;trace->end_time = ktime_get();// 计算延迟(单位为纳秒)u64 latency = ktime_us_delta(trace->end_time, trace->start_time);// 打印或记录延迟printk(KERN_INFO "I/O latency: %lld us\n", latency);
}int init_module(void)
{struct io_trace trace;struct request_queue *q = bdev_get_queue(sb->s_bdev);// 初始化io_trace结构体memset(&trace, 0, sizeof(trace));req->end_io_data = &trace;// 注册回调函数blk_add_trace_hook(q, io_start, BLK_TA_QUEUE);blk_set_completion_callback(req, io_end);return 0;
}void cleanup_module(void)
{// 清理注册的回调函数...
}

以上代码仅为示意,实际应用中需要考虑模块初始化、内存管理、错误处理等诸多复杂因素,并且需要了解内核驱动开发的相关知识才能正确实现。对于大部分应用场景,使用现成的性能分析工具如blktrace会更为便捷和可靠。

这篇关于iostat获取IO延迟单位从ms调整us的方案的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!


原文地址:
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.chinasem.cn/article/560854

相关文章

python获取cmd环境变量值的实现代码

《python获取cmd环境变量值的实现代码》:本文主要介绍在Python中获取命令行(cmd)环境变量的值,可以使用标准库中的os模块,需要的朋友可以参考下... 前言全局说明在执行py过程中,总要使用到系统环境变量一、说明1.1 环境:Windows 11 家庭版 24H2 26100.4061

如何解决Druid线程池Cause:java.sql.SQLRecoverableException:IO错误:Socket read timed out的问题

《如何解决Druid线程池Cause:java.sql.SQLRecoverableException:IO错误:Socketreadtimedout的问题》:本文主要介绍解决Druid线程... 目录异常信息触发场景找到版本发布更新的说明从版本更新信息可以看到该默认逻辑已经去除总结异常信息触发场景复

Java实现本地缓存的常用方案介绍

《Java实现本地缓存的常用方案介绍》本地缓存的代表技术主要有HashMap,GuavaCache,Caffeine和Encahche,这篇文章主要来和大家聊聊java利用这些技术分别实现本地缓存的方... 目录本地缓存实现方式HashMapConcurrentHashMapGuava CacheCaffe

使用Python获取JS加载的数据的多种实现方法

《使用Python获取JS加载的数据的多种实现方法》在当今的互联网时代,网页数据的动态加载已经成为一种常见的技术手段,许多现代网站通过JavaScript(JS)动态加载内容,这使得传统的静态网页爬取... 目录引言一、动态 网页与js加载数据的原理二、python爬取JS加载数据的方法(一)分析网络请求1

通过cmd获取网卡速率的代码

《通过cmd获取网卡速率的代码》今天从群里看到通过bat获取网卡速率两段代码,感觉还不错,学习bat的朋友可以参考一下... 1、本机有线网卡支持的最高速度:%v%@echo off & setlocal enabledelayedexpansionecho 代码开始echo 65001编码获取: >

golang实现延迟队列(delay queue)的两种实现

《golang实现延迟队列(delayqueue)的两种实现》本文主要介绍了golang实现延迟队列(delayqueue)的两种实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的... 目录1 延迟队列:邮件提醒、订单自动取消2 实现2.1 simplChina编程e简单版:go自带的time

使用Python实现调用API获取图片存储到本地的方法

《使用Python实现调用API获取图片存储到本地的方法》开发一个自动化工具,用于从JSON数据源中提取图像ID,通过调用指定API获取未经压缩的原始图像文件,并确保下载结果与Postman等工具直接... 目录使用python实现调用API获取图片存储到本地1、项目概述2、核心功能3、环境准备4、代码实现

无法启动此程序因为计算机丢失api-ms-win-core-path-l1-1-0.dll修复方案

《无法启动此程序因为计算机丢失api-ms-win-core-path-l1-1-0.dll修复方案》:本文主要介绍了无法启动此程序,详细内容请阅读本文,希望能对你有所帮助... 在计算机使用过程中,我们经常会遇到一些错误提示,其中之一就是"api-ms-win-core-path-l1-1-0.dll丢失

利用Python实现可回滚方案的示例代码

《利用Python实现可回滚方案的示例代码》很多项目翻车不是因为不会做,而是走错了方向却没法回头,技术选型失败的风险我们都清楚,但真正能提前规划“回滚方案”的人不多,本文从实际项目出发,教你如何用Py... 目录描述题解答案(核心思路)题解代码分析第一步:抽象缓存接口第二步:实现两个版本第三步:根据 Fea

Python实现获取带合并单元格的表格数据

《Python实现获取带合并单元格的表格数据》由于在日常运维中经常出现一些合并单元格的表格,如果要获取数据比较麻烦,所以本文我们就来聊聊如何使用Python实现获取带合并单元格的表格数据吧... 由于在日常运维中经常出现一些合并单元格的表格,如果要获取数据比较麻烦,现将将封装成类,并通过调用list_exc