Golang学习系列1-pprof性能调优

1. pprof 简述 

一位亦师亦友的话让我记忆犹新,他说“学习一个新事务,应该从三个方面入手what,why,how;且三者的重要程度应该是递减”。所以在本文的第一部分先叙述下pprof的what & why。

1.1 What?

pprof是golang自身提供的一种性能分析可视化工具。pprof开启后,每隔一段时间(10ms)就会收集下当前的堆栈信息,获取各个函数占用的CPU以及内存资源,并通过采样数据的分析形成一个性能分析报告。性能分析报告的核心内容包括:

  • CPU Profiling:CPU 分析,按照一定的频率采集所监听的应用程序 CPU(含寄存器)的使用情况,可确定应用程序在主动消耗 CPU 周期时花费时间的位置
  • Memory Profiling:内存分析,在应用程序进行堆分配时记录堆栈跟踪,用于监视当前和历史内存使用情况,以及检查内存泄漏
  • Block Profiling:阻塞分析,记录 goroutine 阻塞等待同步(包括定时器通道)的位置
  • Mutex Profiling:互斥锁分析,报告互斥锁的竞争情况

1.2 Why?

基于以上的分析报告,开发人员可以快速分析,定位和优化性能问题。

2. 案例依赖环境配置

本文基于windows11操作系统完成配置。

  • Graph Visualization图可视化工具

官网描述:

Graph visualization is a way of representing structural information as diagrams of abstract graphs and networks. 

译文:

图可视化是一种将结构信息表示为抽象图和网络图的方法。

该工具在本文的作用体现在"案例分析"时对函数间调用关系以及各函数的CPU占用情况,以svg图形式进行可视化描述。

1)官网下载地址:https://www.graphviz.org/download/

2)安装&配置环境变量

  • 安装:除了"安装位置"自定义外,其余步骤按照默认值即可。

  •  环境变量配置

        在"控制面板"->"系统和安全"->"系统"->"高级系统设置"->"环境变量"->"系统变量"中完成设置

  • 验证是否安装配置成功

        Win+R 运行cmd窗口,输入命令'dot -version'查看,显示以下结果表示安装配置成功。

3. 案例分析

这部分就是在讲"How to do it?"的问题啦!

本实战基于Git开源项目"GitHub - wolfogre/go-pprof-practice: go pprof practice.",首先clone项目到本地,然后运行main.go.

3.1 pprof报告预览

在浏览器中访问:"http://localhost:6060/debug/pprof/",就可以看到pprof报告的预览页。

3.2 性能问题排查优化

以排查优化CPU占用问题为例进行描述。内存,协程,锁等问题除需要分析的指标不同外,其余排查优化步骤都与CPU相似,所以后面就不再赘述啦😁。

1)问题表现

        运行main.go后,查看任务管理器,发现该任务的CPU占用几乎为总CPU占用的50%。

2)问题分析

# 采集前10s的数据到文件中,然后进入pprof操作命令行界面
go tool pprof "http://localhost:6060/debug/pprof/profile?seconds=10"

输入'top'查看 CPU占用最多的程序,输出结果如下:

参数说明
参数描述
flat当前函数本身的执行耗时【等于0时:表示当前函数中只包含其他函数的调用
flat%flat占CPU总时间的比例
sum%上面每一行flat%的总和
cum

当前函数+调用其他函数的总耗时【等于flat时:表示函数中无其他函数调用

cum%cum占CPU总时间的比例

 由上图可见,函数"github.com/wolfogre/go-pprof-practice/animal/felidae/tiger.(*Tiger).Eat"的调用占用了几乎全部的CPU。使用'list Eat'命令查看具体函数的执行时间,以快速地定位到具体代码。

扩展:安装配置完成Graph Visualization可视化工具后,可使用'web'命令可对函数调用关系和资源使用情况进行svg可视化展示。

3)问题解决

通过上一步可定位到具体的问题代码,优化该代码逻辑即可。

注释掉耗时的代码后,再次查看任务管理器的资源消耗情况,可以看到已经完美解决Perfect!!!

func (t *Tiger) Eat() {log.Println(t.Name(), "eat")//注释掉耗时代码//loop := 10000000000//for i := 0; i < loop; i++ {//	// do nothing//}
}

4. 总结

最后,对程序性能问题的排查步骤核心指标做个简单小结。

核心指标

  

指标类型描述
profileCPU占用情况【eg: http://localhost:6060/debug/pprof/profile
heap内存占用情况【eg: http://localhost:6060/debug/pprof/heap
goroutine协程调度【eg: http://localhost:6060/debug/pprof/goroutine
mutex锁竞争情况【eg: http://localhost:6060/debug/pprof/mutex
block阻塞情况【eg: http://localhost:6060/debug/pprof/block

排查步骤

1. 采集数据&运行pprof分析工具

 go tool pprof "http://localhost:6060/debug/pprof/xxx?seconds=5"

2. 运行top指令

利用pprof提供的top指令查看指定指标的top函数。

3. 运行list xxx指令

利用pprof提供的list指令查看指定函数运行详情,定位问题,最后优化具体的代码即可。

参考文章:

pprof性能调优实战|青训营笔记

地鼠文档-pprof性能调优

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.hqwc.cn/news/587863.html

如若内容造成侵权/违法违规/事实不符,请联系编程知识网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

大模型量化技术-GPTQ

大模型量化技术-GPTQ 2022年,Frantar等人发表了论文 GPTQ:Accurate Post-Training Quantization for Generative Pre-trained Transformers。 这篇论文详细介绍了一种训练后量化算法,适用于所有通用的预训练 Transformer模型,同时只有微小的性能下降。 GPTQ算法需要通过…

剑指offer打卡 JZ6 从尾到头打印链表

在牛客网刷的&#xff0c;还是跟leetcode一样非acm模式&#xff0c;由于急着暑期实习题量不固定&#xff0c;八股算法轮刷 打卡内容偏个人笔记&#xff0c;本人水平一般(代码随想录稀里糊涂刷了一遍)&#xff0c;从小白开始分析(甚至会分析语法)&#xff0c;尽量一题多解深入探…

SpringBoot | Spring Boot“整合Redis“

目录: 1. Redis 介绍2. Redis 下载安装3. Redis “服务开启”和“连接配置”4. Spring Boot整合Redis的“前期准备” :① 编写实体类② 编写Repository 接口③ 在“全局配置文件”中添加 “Redis数据库” 的 “相关配置信息” 5. Spring Boot整合“Redis” (案例展示) 作者简介…

不同设备使用同一个Git账号

想要在公司和家里的电脑上用同一个git账号来pull, push代码 1. 查看原设备的用户名和邮箱 第1种方法&#xff0c; 依次输入 git config user.name git config user.email第2种方法&#xff0c; 输入 cat ~/.gitconfig2. 配置新设备的用户名和邮箱 用户名和邮箱与原设备保持…

C-偶遇行军蚁(遇到过的题,做个笔记)

我的代码: 思路就是把每一行看成一个字符串&#xff0c;然后逐渐增加字符就行 #include <iostream> #include <vector> using namespace std; int main() {string s;int n;cin >> n; //读入行数cin >> s; //读入字符串vector<string>arr(n…

黄金票据制作

1、黄金票据 黄金票据在内网渗透中主要用于权限维持&#xff0c;即留下后门。使用黄金票据前提是你已经控制了整个域的域控制器。其核心原理与服务器中的krbtgt用户相关。从以下可以了解krbtgt原理&#xff1a; 前言 | windows protocolhttps://daiker.gitbook.io/windows-pro…

开源布道 共创生态——2024 AutoMQ 布道师计划启动!

我们是来自 Apache RocketMQ 和 Linux LVS 项目的核心团队&#xff0c;曾经见证并应对过消息队列基础设施在大型互联网公司和云计算公司的挑战。基于对象存储优先、存算分离、多云原生等技术理念&#xff0c;我们重新设计并实现 Apache Kafka 和 Apache RocketMQ&#xff0c;带…

Vue2(完结):replace属性、编程式路由导航、缓存路由组件、两个新钩子、路由守卫、history与hash

一、router-link的replace属性 1、作用&#xff1a;控制路由跳转时操作浏览器历史记录的模式 2、浏览器的历史记录有两种写入方式&#xff1a;分别为push和replace&#xff0c;push是追加历史记录&#xff0c;replace是替换当前记录。路由跳转时候默认为push 3、如何开启repla…

Node.js知识点总结:从入门到入土

Node.js知识点总结&#xff1a;从入门到入土 node.js概念说明与相关知识储备了解基本概念&#xff1a;JavaScript基础能力&#xff1a;安装和设置Node.js环境&#xff1a;核心能力模块&#xff1a;重点能力-异步编程&#xff1a;使用npm管理依赖&#xff1a;构建Web应用&#x…

JVM垃圾收集——相关概念

本贴讲解的内容包括System.gc()、内存溢出、内存泄漏、STW机制以及垃圾收集的串行、并行、并发三种情况&#xff0c;还有强引用、软引用、弱引用、虚引用四种引用。 1、System.gc()的理解 在默认情况下&#xff0c;通过System.gc()或者Runtime.getRuntime().gc()的调用&#…

大数据分析与内存计算——Spark安装以及Hadoop操作——注意事项

一、Spark安装 1.相关链接 https://dblab.xmu.edu.cn/blog/4322/ 2.安装Spark&#xff08;Local模式&#xff09; 按照文章中的步骤安装即可 遇到问题&#xff1a;xshell以及xftp不能使用 解决办法&#xff1a; 在linux使用镜像网站进行下载&#xff1a;wget https://mi…

OpenCV 4.9基本绘图

返回&#xff1a;OpenCV系列文章目录&#xff08;持续更新中......&#xff09; 上一篇&#xff1a;OpenCV使用通用内部函数对代码进行矢量化 下一篇&#xff1a;OpenCV系列文章目录&#xff08;持续更新中......&#xff09; ​目标 在本教程中&#xff0c;您将学习如何&am…