Golang学习系列1-pprof性能调优

2024-04-04 15:28

本文主要是介绍Golang学习系列1-pprof性能调优,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1. pprof 简述 

一位亦师亦友的话让我记忆犹新,他说“学习一个新事务,应该从三个方面入手what,why,how;且三者的重要程度应该是递减”。所以在本文的第一部分先叙述下pprof的what & why。

1.1 What?

pprof是golang自身提供的一种性能分析可视化工具。pprof开启后,每隔一段时间(10ms)就会收集下当前的堆栈信息,获取各个函数占用的CPU以及内存资源,并通过采样数据的分析形成一个性能分析报告。性能分析报告的核心内容包括:

  • CPU Profiling:CPU 分析,按照一定的频率采集所监听的应用程序 CPU(含寄存器)的使用情况,可确定应用程序在主动消耗 CPU 周期时花费时间的位置
  • Memory Profiling:内存分析,在应用程序进行堆分配时记录堆栈跟踪,用于监视当前和历史内存使用情况,以及检查内存泄漏
  • Block Profiling:阻塞分析,记录 goroutine 阻塞等待同步(包括定时器通道)的位置
  • Mutex Profiling:互斥锁分析,报告互斥锁的竞争情况

1.2 Why?

基于以上的分析报告,开发人员可以快速分析,定位和优化性能问题。

2. 案例依赖环境配置

本文基于windows11操作系统完成配置。

  • Graph Visualization图可视化工具

官网描述:

Graph visualization is a way of representing structural information as diagrams of abstract graphs and networks. 

译文:

图可视化是一种将结构信息表示为抽象图和网络图的方法。

该工具在本文的作用体现在"案例分析"时对函数间调用关系以及各函数的CPU占用情况,以svg图形式进行可视化描述。

1)官网下载地址:https://www.graphviz.org/download/

2)安装&配置环境变量

  • 安装:除了"安装位置"自定义外,其余步骤按照默认值即可。

  •  环境变量配置

        在"控制面板"->"系统和安全"->"系统"->"高级系统设置"->"环境变量"->"系统变量"中完成设置

  • 验证是否安装配置成功

        Win+R 运行cmd窗口,输入命令'dot -version'查看,显示以下结果表示安装配置成功。

3. 案例分析

这部分就是在讲"How to do it?"的问题啦!

本实战基于Git开源项目"GitHub - wolfogre/go-pprof-practice: go pprof practice.",首先clone项目到本地,然后运行main.go.

3.1 pprof报告预览

在浏览器中访问:"http://localhost:6060/debug/pprof/",就可以看到pprof报告的预览页。

3.2 性能问题排查优化

以排查优化CPU占用问题为例进行描述。内存,协程,锁等问题除需要分析的指标不同外,其余排查优化步骤都与CPU相似,所以后面就不再赘述啦😁。

1)问题表现

        运行main.go后,查看任务管理器,发现该任务的CPU占用几乎为总CPU占用的50%。

2)问题分析

# 采集前10s的数据到文件中,然后进入pprof操作命令行界面
go tool pprof "http://localhost:6060/debug/pprof/profile?seconds=10"

输入'top'查看 CPU占用最多的程序,输出结果如下:

参数说明
参数描述
flat当前函数本身的执行耗时【等于0时:表示当前函数中只包含其他函数的调用
flat%flat占CPU总时间的比例
sum%上面每一行flat%的总和
cum

当前函数+调用其他函数的总耗时【等于flat时:表示函数中无其他函数调用

cum%cum占CPU总时间的比例

 由上图可见,函数"github.com/wolfogre/go-pprof-practice/animal/felidae/tiger.(*Tiger).Eat"的调用占用了几乎全部的CPU。使用'list Eat'命令查看具体函数的执行时间,以快速地定位到具体代码。

扩展:安装配置完成Graph Visualization可视化工具后,可使用'web'命令可对函数调用关系和资源使用情况进行svg可视化展示。

3)问题解决

通过上一步可定位到具体的问题代码,优化该代码逻辑即可。

注释掉耗时的代码后,再次查看任务管理器的资源消耗情况,可以看到已经完美解决Perfect!!!

func (t *Tiger) Eat() {log.Println(t.Name(), "eat")//注释掉耗时代码//loop := 10000000000//for i := 0; i < loop; i++ {//	// do nothing//}
}

4. 总结

最后,对程序性能问题的排查步骤核心指标做个简单小结。

核心指标

  

指标类型描述
profileCPU占用情况【eg: http://localhost:6060/debug/pprof/profile
heap内存占用情况【eg: http://localhost:6060/debug/pprof/heap
goroutine协程调度【eg: http://localhost:6060/debug/pprof/goroutine
mutex锁竞争情况【eg: http://localhost:6060/debug/pprof/mutex
block阻塞情况【eg: http://localhost:6060/debug/pprof/block

排查步骤

1. 采集数据&运行pprof分析工具

 go tool pprof "http://localhost:6060/debug/pprof/xxx?seconds=5"

2. 运行top指令

利用pprof提供的top指令查看指定指标的top函数。

3. 运行list xxx指令

利用pprof提供的list指令查看指定函数运行详情,定位问题,最后优化具体的代码即可。

参考文章:

pprof性能调优实战|青训营笔记

地鼠文档-pprof性能调优

这篇关于Golang学习系列1-pprof性能调优的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/876152

相关文章

PyTorch高级特性与性能优化方式

《PyTorch高级特性与性能优化方式》:本文主要介绍PyTorch高级特性与性能优化方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、自动化机制1.自动微分机制2.动态计算图二、性能优化1.内存管理2.GPU加速3.多GPU训练三、分布式训练1.分布式数据

重新对Java的类加载器的学习方式

《重新对Java的类加载器的学习方式》:本文主要介绍重新对Java的类加载器的学习方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录1、介绍1.1、简介1.2、符号引用和直接引用1、符号引用2、直接引用3、符号转直接的过程2、加载流程3、类加载的分类3.1、显示

Linux高并发场景下的网络参数调优实战指南

《Linux高并发场景下的网络参数调优实战指南》在高并发网络服务场景中,Linux内核的默认网络参数往往无法满足需求,导致性能瓶颈、连接超时甚至服务崩溃,本文基于真实案例分析,从参数解读、问题诊断到优... 目录一、问题背景:当并发连接遇上性能瓶颈1.1 案例环境1.2 初始参数分析二、深度诊断:连接状态与

Java的"伪泛型"变"真泛型"后对性能的影响

《Java的伪泛型变真泛型后对性能的影响》泛型擦除本质上就是擦除与泛型相关的一切信息,例如参数化类型、类型变量等,Javac还将在需要时进行类型检查及强制类型转换,甚至在必要时会合成桥方法,这篇文章主... 目录1、真假泛型2、性能影响泛型存在于Java源代码中,在编译为字节码文件之前都会进行泛型擦除(ty

Golang HashMap实现原理解析

《GolangHashMap实现原理解析》HashMap是一种基于哈希表实现的键值对存储结构,它通过哈希函数将键映射到数组的索引位置,支持高效的插入、查找和删除操作,:本文主要介绍GolangH... 目录HashMap是一种基于哈希表实现的键值对存储结构,它通过哈希函数将键映射到数组的索引位置,支持

Java学习手册之Filter和Listener使用方法

《Java学习手册之Filter和Listener使用方法》:本文主要介绍Java学习手册之Filter和Listener使用方法的相关资料,Filter是一种拦截器,可以在请求到达Servl... 目录一、Filter(过滤器)1. Filter 的工作原理2. Filter 的配置与使用二、Listen

golang获取当前时间、时间戳和时间字符串及它们之间的相互转换方法

《golang获取当前时间、时间戳和时间字符串及它们之间的相互转换方法》:本文主要介绍golang获取当前时间、时间戳和时间字符串及它们之间的相互转换,本文通过实例代码给大家介绍的非常详细,感兴趣... 目录1、获取当前时间2、获取当前时间戳3、获取当前时间的字符串格式4、它们之间的相互转化上篇文章给大家介

Python如何使用__slots__实现节省内存和性能优化

《Python如何使用__slots__实现节省内存和性能优化》你有想过,一个小小的__slots__能让你的Python类内存消耗直接减半吗,没错,今天咱们要聊的就是这个让人眼前一亮的技巧,感兴趣的... 目录背景:内存吃得满满的类__slots__:你的内存管理小助手举个大概的例子:看看效果如何?1.

golang 日志log与logrus示例详解

《golang日志log与logrus示例详解》log是Go语言标准库中一个简单的日志库,本文给大家介绍golang日志log与logrus示例详解,感兴趣的朋友一起看看吧... 目录一、Go 标准库 log 详解1. 功能特点2. 常用函数3. 示例代码4. 优势和局限二、第三方库 logrus 详解1.

Redis中高并发读写性能的深度解析与优化

《Redis中高并发读写性能的深度解析与优化》Redis作为一款高性能的内存数据库,广泛应用于缓存、消息队列、实时统计等场景,本文将深入探讨Redis的读写并发能力,感兴趣的小伙伴可以了解下... 目录引言一、Redis 并发能力概述1.1 Redis 的读写性能1.2 影响 Redis 并发能力的因素二、