MNN学习笔记(七):修改ONNX的resize算子转换器

2023-12-23 10:48

本文主要是介绍MNN学习笔记(七):修改ONNX的resize算子转换器,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

一、需求

最近在转换一个超分模型的时候,对应动态输入需要让模型自动推理当前层的尺度,但是Resize层在转MNN的时候,参数已经被写死,转换成功的模型没办法去自适应的匹配当前图像输入大小,超分模型的输出与预期不一致。

二、处理流程

2.1 初步定位

首先用MNN的官方工具MNNV2Basic.out,具体用法可以参考资料[1],打印出每一层的输入和输出, 然后观察输入输出的文件大小变化,可以看到第56层的输入从1615k跳变成了1k,初步断定是第56层出了问题;

2.2 再次确认

用Netron打开MNN模型文件可以看到,Interp文件的outputWidth和OutputHeight写死了,都是40,而不是采用设置widthScale和heightScale方式,因此这一层不会动态计算Size,最终导致输出层产生和预期不一致的结果。

2.3 转换器代码查询

初略读了一下ONNX的模型转换器,大致流程如下:

具体代码解读,可以参考参考资料[2],每一个ONNX的OP对应于一个MNNOP转换器,resize对应OpConverter位于MNN/tools/converter/source/optimizer/onnxextra/OnnxUpsample.cpp中,注销掉outputWidth进而outputHeight参数,设置widthScale进而heightScale参数,

// resizeParam->outputHeight = sizesDataPtr[2];
// resizeParam->outputWidth  = sizesDataPtr[3];
resizeParam->widthScale = 2.0f;
resizeParam->heightScale = 2.0f;

重新编译转换器,进行模型转换即可。

三、总结

首先,总的来说,改动代码也就几行,整个流程最主要的难点在于如何去定位问题,怎么去查找应该去修改哪一块代码,前期的工作量占用了整个工作的99.99%的时间;然后,对于正在使用的库或工具,我们除了要知道基本用法之外,在精力允许的前提下,可以去深入一点地了解更加底层一点的东西;最后,MNN代码真心不错,强烈安利大家读一读,真的收获很多,比如,定时工具、线程工具、CMakeLIstst文件写法、文件查询工具、工程如何构建、内存如何管理等等。

四、参考资料:

[1] https://www.yuque.com/mnn/cn/tool_test

[2] https://zhuanlan.zhihu.com/p/124295758

 

这篇关于MNN学习笔记(七):修改ONNX的resize算子转换器的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/527762

相关文章

Go学习记录之runtime包深入解析

《Go学习记录之runtime包深入解析》Go语言runtime包管理运行时环境,涵盖goroutine调度、内存分配、垃圾回收、类型信息等核心功能,:本文主要介绍Go学习记录之runtime包的... 目录前言:一、runtime包内容学习1、作用:① Goroutine和并发控制:② 垃圾回收:③ 栈和

Oracle修改端口号之后无法启动的解决方案

《Oracle修改端口号之后无法启动的解决方案》Oracle数据库更改端口后出现监听器无法启动的问题确实较为常见,但并非必然发生,这一问题通常源于​​配置错误或环境冲突​​,而非端口修改本身,以下是系... 目录一、问题根源分析​​​二、保姆级解决方案​​​​步骤1:修正监听器配置文件 (listener.

Linux中修改Apache HTTP Server(httpd)默认端口的完整指南

《Linux中修改ApacheHTTPServer(httpd)默认端口的完整指南》ApacheHTTPServer(简称httpd)是Linux系统中最常用的Web服务器之一,本文将详细介绍如何... 目录一、修改 httpd 默认端口的步骤1. 查找 httpd 配置文件路径2. 编辑配置文件3. 保存

Android学习总结之Java和kotlin区别超详细分析

《Android学习总结之Java和kotlin区别超详细分析》Java和Kotlin都是用于Android开发的编程语言,它们各自具有独特的特点和优势,:本文主要介绍Android学习总结之Ja... 目录一、空安全机制真题 1:Kotlin 如何解决 Java 的 NullPointerExceptio

Nginx 413修改上传文件大小限制的方法详解

《Nginx413修改上传文件大小限制的方法详解》在使用Nginx作为Web服务器时,有时会遇到客户端尝试上传大文件时返回​​413RequestEntityTooLarge​​... 目录1. 理解 ​​413 Request Entity Too Large​​ 错误2. 修改 Nginx 配置2.1

Python对PDF书签进行添加,修改提取和删除操作

《Python对PDF书签进行添加,修改提取和删除操作》PDF书签是PDF文件中的导航工具,通常包含一个标题和一个跳转位置,本教程将详细介绍如何使用Python对PDF文件中的书签进行操作... 目录简介使用工具python 向 PDF 添加书签添加书签添加嵌套书签Python 修改 PDF 书签Pytho

重新对Java的类加载器的学习方式

《重新对Java的类加载器的学习方式》:本文主要介绍重新对Java的类加载器的学习方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录1、介绍1.1、简介1.2、符号引用和直接引用1、符号引用2、直接引用3、符号转直接的过程2、加载流程3、类加载的分类3.1、显示

Java学习手册之Filter和Listener使用方法

《Java学习手册之Filter和Listener使用方法》:本文主要介绍Java学习手册之Filter和Listener使用方法的相关资料,Filter是一种拦截器,可以在请求到达Servl... 目录一、Filter(过滤器)1. Filter 的工作原理2. Filter 的配置与使用二、Listen

利用Python快速搭建Markdown笔记发布系统

《利用Python快速搭建Markdown笔记发布系统》这篇文章主要为大家详细介绍了使用Python生态的成熟工具,在30分钟内搭建一个支持Markdown渲染、分类标签、全文搜索的私有化知识发布系统... 目录引言:为什么要自建知识博客一、技术选型:极简主义开发栈二、系统架构设计三、核心代码实现(分步解析

Docker镜像修改hosts及dockerfile修改hosts文件的实现方式

《Docker镜像修改hosts及dockerfile修改hosts文件的实现方式》:本文主要介绍Docker镜像修改hosts及dockerfile修改hosts文件的实现方式,具有很好的参考价... 目录docker镜像修改hosts及dockerfile修改hosts文件准备 dockerfile 文