PyTorch模型参数量计算【使用torchsummary库与自定义 两种方法!附完整代码!!】

本文主要是介绍PyTorch模型参数量计算【使用torchsummary库与自定义 两种方法!附完整代码!!】,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

深度学习PyTorch模型参数量计算示例

在深度学习中,有时候处于分析模型的需要或者写文章的需要,得到模型的参数量对于理解模型复杂度、进行内存管理以及模型优化都至关重要。PyTorch作为当前流行的深度学习框架,为我们提供了计算模型参数量的工具和方法。下面将通过两个示例,详细展示如何在PyTorch中计算模型的参数量。

示例一:基础模型参数量计算

首先,我们创建一个简单的PyTorch模型,该模型包含一个卷积层、一个ReLU激活函数层和一个全连接层。然后,我们将使用PyTorch的torchsummary库来计算模型的参数量。

import torch
import torch.nn as nn
from torchsummary import summary# 定义一个示例模型
class ExampleModel(nn.Module):def __init__(self):super(ExampleModel, self).__init__()self.conv1 = nn.Conv2d(3, 16, 3, padding=1)self.conv2 = nn.Conv2d(16, 32, 3, padding=1)self.fc = nn.Linear(32 * 8 * 8, 10)def forward(self, x1, x2, x3):# 处理第一个图像x = torch.relu(self.conv1(x1))x = torch.relu(self.conv2(x))x = x.view(-1, 32 * 8 * 8)x = self.fc(x)# 处理第二个图像y = torch.relu(self.conv1(x2))y = torch.relu(self.conv2(y))y = y.view(-1, 32 * 8 * 8)y = self.fc(y)# 处理第三个图像z = torch.relu(self.conv1(x3))z = torch.relu(self.conv2(z))z = z.view(-1, 32 * 8 * 8)z = self.fc(z)return x, y, z# 创建一个示例模型实例
model = ExampleModel()# 将模型移动到 CUDA 设备上
device = torch.device('cuda')
model.to(device)# 模拟输入,假设每张图像大小为 3x32x32
image1 = torch.randn(1, 3, 32, 32).to(device)
image2 = torch.randn(1, 3, 32, 32).to(device)
image3 = torch.randn(1, 3, 32, 32).to(device)# 打印模型摘要
summary(model, [(3, 32, 32), (3, 32, 32), (3, 32, 32)])  # 传递每个图像的输入大小

在上面的代码中,我们首先定义了一个简单的示例模型ExampleModel,然后使用torchsummary库的summary函数来计算模型的参数量。summary函数需要两个参数:模型实例和输入数据的形状。执行这段代码后,将会输出模型的每一层的详细信息,包括输出大小、参数量等。
在这里插入图片描述

示例二:自定义函数计算参数量

除了使用torchsummary库,我们还可以自定义一个函数来计算模型的参数量。这样做的好处是更加灵活,可以根据需要定制输出信息。

import torch
import torch.nn as nn# 定义一个示例模型
class ExampleModel(nn.Module):def __init__(self):super(ExampleModel, self).__init__()self.conv1 = nn.Conv2d(3, 16, 3, padding=1)self.conv2 = nn.Conv2d(16, 32, 3, padding=1)self.fc = nn.Linear(32 * 8 * 8, 10)def forward(self, x):x = torch.relu(self.conv1(x))x = torch.relu(self.conv2(x))x = x.view(-1, 32 * 8 * 8)x = self.fc(x)return x# 创建一个示例模型实例
model = ExampleModel()# 计算模型参数大小
total_params = sum(p.numel() for p in model.parameters())
print("Total parameters:", total_params)

在这个示例中,我们定义了一个sum(p.numel() for p in model.parameters())操作,它遍历模型的所有参数,并计算需要梯度的参数的总数。numel()函数返回张量中的元素总数。最后,我们打印出模型的参数量。
在这里插入图片描述

总结

通过以上两个示例,我们展示了如何在PyTorch中计算模型的参数量。第一个示例使用了torchsummary库,它提供了详细的模型层信息以及参数量的统计;第二个示例则通过自定义函数来实现参数量的计算,更加灵活可控。在实际项目中,大家根据具体需求选择合适的方法来计算模型参数量,有助于更好地理解和优化模型。

版权声明

本博客内容仅供学习交流,转载请注明出处。

这篇关于PyTorch模型参数量计算【使用torchsummary库与自定义 两种方法!附完整代码!!】的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/945453

相关文章

使用Python开发一个Ditto剪贴板数据导出工具

《使用Python开发一个Ditto剪贴板数据导出工具》在日常工作中,我们经常需要处理大量的剪贴板数据,下面将介绍如何使用Python的wxPython库开发一个图形化工具,实现从Ditto数据库中读... 目录前言运行结果项目需求分析技术选型核心功能实现1. Ditto数据库结构分析2. 数据库自动定位3

Python yield与yield from的简单使用方式

《Pythonyield与yieldfrom的简单使用方式》生成器通过yield定义,可在处理I/O时暂停执行并返回部分结果,待其他任务完成后继续,yieldfrom用于将一个生成器的值传递给另一... 目录python yield与yield from的使用代码结构总结Python yield与yield

Go语言使用select监听多个channel的示例详解

《Go语言使用select监听多个channel的示例详解》本文将聚焦Go并发中的一个强力工具,select,这篇文章将通过实际案例学习如何优雅地监听多个Channel,实现多任务处理、超时控制和非阻... 目录一、前言:为什么要使用select二、实战目标三、案例代码:监听两个任务结果和超时四、运行示例五

python使用Akshare与Streamlit实现股票估值分析教程(图文代码)

《python使用Akshare与Streamlit实现股票估值分析教程(图文代码)》入职测试中的一道题,要求:从Akshare下载某一个股票近十年的财务报表包括,资产负债表,利润表,现金流量表,保存... 目录一、前言二、核心知识点梳理1、Akshare数据获取2、Pandas数据处理3、Matplotl

Django开发时如何避免频繁发送短信验证码(python图文代码)

《Django开发时如何避免频繁发送短信验证码(python图文代码)》Django开发时,为防止频繁发送验证码,后端需用Redis限制请求频率,结合管道技术提升效率,通过生产者消费者模式解耦业务逻辑... 目录避免频繁发送 验证码1. www.chinasem.cn避免频繁发送 验证码逻辑分析2. 避免频繁

Java使用Thumbnailator库实现图片处理与压缩功能

《Java使用Thumbnailator库实现图片处理与压缩功能》Thumbnailator是高性能Java图像处理库,支持缩放、旋转、水印添加、裁剪及格式转换,提供易用API和性能优化,适合Web应... 目录1. 图片处理库Thumbnailator介绍2. 基本和指定大小图片缩放功能2.1 图片缩放的

精选20个好玩又实用的的Python实战项目(有图文代码)

《精选20个好玩又实用的的Python实战项目(有图文代码)》文章介绍了20个实用Python项目,涵盖游戏开发、工具应用、图像处理、机器学习等,使用Tkinter、PIL、OpenCV、Kivy等库... 目录① 猜字游戏② 闹钟③ 骰子模拟器④ 二维码⑤ 语言检测⑥ 加密和解密⑦ URL缩短⑧ 音乐播放

Python使用Tenacity一行代码实现自动重试详解

《Python使用Tenacity一行代码实现自动重试详解》tenacity是一个专为Python设计的通用重试库,它的核心理念就是用简单、清晰的方式,为任何可能失败的操作添加重试能力,下面我们就来看... 目录一切始于一个简单的 API 调用Tenacity 入门:一行代码实现优雅重试精细控制:让重试按我

Python安装Pandas库的两种方法

《Python安装Pandas库的两种方法》本文介绍了三种安装PythonPandas库的方法,通过cmd命令行安装并解决版本冲突,手动下载whl文件安装,更换国内镜像源加速下载,最后建议用pipli... 目录方法一:cmd命令行执行pip install pandas方法二:找到pandas下载库,然后

MySQL中EXISTS与IN用法使用与对比分析

《MySQL中EXISTS与IN用法使用与对比分析》在MySQL中,EXISTS和IN都用于子查询中根据另一个查询的结果来过滤主查询的记录,本文将基于工作原理、效率和应用场景进行全面对比... 目录一、基本用法详解1. IN 运算符2. EXISTS 运算符二、EXISTS 与 IN 的选择策略三、性能对比