google官方efficientdet网络训练自己数据集步骤以及问题解决

2023-12-15 10:59

本文主要是介绍google官方efficientdet网络训练自己数据集步骤以及问题解决,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

google官方efficientdet网络训练自己数据集步骤以及问题解决

1、谷歌官方代码网址,github上有各种版本的,建议使用官方的不会出现什么问题。

https://github.com/google/automl/tree/master/efficientdet

本人采坑记录,一开始使用github上pytorch版本star比较高的用来训练测试,发现精度还不错,但是infer的速度始终无法达到参考指标,后来一查确实有一些人也遇到这样的问题也都没有解决,经过1天的努力,最后决定跳坑,最终证明还是官方的香!

2、先上图,一睹为快,然后再详细介绍。

测试集上的指标:

3、推测的速度(从图像读入到model中到处理之后得到结果的时间):

在这里插入图片描述
接下来进入正题:

1、数据集准备

这里建议自己的数据集转换成Pascal VOC的格式,因为我试过coco的转换存在一些问题,一会儿详细说一下。

这里推荐一个详细的参考教程:
数据集准备教程

下面内容作为上面博文未提到的补充

1、采坑记录:当我按照这个教程制定自己的数据集跑网络的时候出现了如下的问题:
在这里插入图片描述
我用coco的又转换了一遍发现还是这个问题,最终通过调试找到了问题的原因:
将图片转换成tfrecord的形式,要求图片一定是JPEG格式的图片,因为我的数据集里面虽然文件后缀都是.jpg但是其中有很多格式的,比如BMP,RGBA等等,所以到一定要将图片都转换为JPEG格式的。
将转换文件里面113行代码:

  if image.format != 'JPEG':raise ValueError('Image format not JPEG')

转换改写成如下:将格式统一进行转换之后用image.save将图片以.jpg格式以同名的形式保存到另一个文件夹,之后再将两个文件夹图片融合,代替重复图片。

  if image.format != 'JPEG':# raise ValueError('Image format not JPEG')if image.mode == "P":image = image.convert('RGB')if image.mode =="RGBA":image=image.convert('RGB')image.save('/home/user/Downloads/'+full_path)print("image:",full_path,"format:",image.format)

之后再运行就没有问题了,这也是为什么建议用Pascal VOC的格式进行转换,防止浪费不必要的时间。

2、获得infer一张图片需要的时间:

python model_inspect.py --runmode=bm \--model_name=efficientdet-d0   --ckpt_path=tmp/efficientdet-d0-finetune \--hparams=my_config.yaml  \--input_image=testdata/image.jpg --output_image_dir=/tmp/

ckpt_path为保存训练checkpoint的文件夹名
input_image可以指定一张图片,当需要预测多张图片的时候可以改成testdata/*.jpg
结果如开头的图片所示。

3、可视化图片的检测结果:

python model_inspect.py --runmode=infer \--model_name=efficientdet-d0   --ckpt_path=tmp/efficientdet-d0-finetune \--hparams=my_config.yaml  \--input_image=testdata/image.jpg --output_image_dir=/tmp/ --line_thickness=2

从训练到测试过程介绍完毕!

这篇关于google官方efficientdet网络训练自己数据集步骤以及问题解决的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/496201

相关文章

Mac系统下卸载JAVA和JDK的步骤

《Mac系统下卸载JAVA和JDK的步骤》JDK是Java语言的软件开发工具包,它提供了开发和运行Java应用程序所需的工具、库和资源,:本文主要介绍Mac系统下卸载JAVA和JDK的相关资料,需... 目录1. 卸载系统自带的 Java 版本检查当前 Java 版本通过命令卸载系统 Java2. 卸载自定

Nginx 配置跨域的实现及常见问题解决

《Nginx配置跨域的实现及常见问题解决》本文主要介绍了Nginx配置跨域的实现及常见问题解决,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来... 目录1. 跨域1.1 同源策略1.2 跨域资源共享(CORS)2. Nginx 配置跨域的场景2.1

qt5cored.dll报错怎么解决? 电脑qt5cored.dll文件丢失修复技巧

《qt5cored.dll报错怎么解决?电脑qt5cored.dll文件丢失修复技巧》在进行软件安装或运行程序时,有时会遇到由于找不到qt5core.dll,无法继续执行代码,这个问题可能是由于该文... 遇到qt5cored.dll文件错误时,可能会导致基于 Qt 开发的应用程序无法正常运行或启动。这种错

SQL Server修改数据库名及物理数据文件名操作步骤

《SQLServer修改数据库名及物理数据文件名操作步骤》在SQLServer中重命名数据库是一个常见的操作,但需要确保用户具有足够的权限来执行此操作,:本文主要介绍SQLServer修改数据... 目录一、背景介绍二、操作步骤2.1 设置为单用户模式(断开连接)2.2 修改数据库名称2.3 查找逻辑文件名

Python UV安装、升级、卸载详细步骤记录

《PythonUV安装、升级、卸载详细步骤记录》:本文主要介绍PythonUV安装、升级、卸载的详细步骤,uv是Astral推出的下一代Python包与项目管理器,主打单一可执行文件、极致性能... 目录安装检查升级设置自动补全卸载UV 命令总结 官方文档详见:https://docs.astral.sh/

Python pip下载包及所有依赖到指定文件夹的步骤说明

《Pythonpip下载包及所有依赖到指定文件夹的步骤说明》为了方便开发和部署,我们常常需要将Python项目所依赖的第三方包导出到本地文件夹中,:本文主要介绍Pythonpip下载包及所有依... 目录步骤说明命令格式示例参数说明离线安装方法注意事项总结要使用pip下载包及其所有依赖到指定文件夹,请按照以

canal实现mysql数据同步的详细过程

《canal实现mysql数据同步的详细过程》:本文主要介绍canal实现mysql数据同步的详细过程,本文通过实例图文相结合给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的... 目录1、canal下载2、mysql同步用户创建和授权3、canal admin安装和启动4、canal

SpringBoot排查和解决JSON解析错误(400 Bad Request)的方法

《SpringBoot排查和解决JSON解析错误(400BadRequest)的方法》在开发SpringBootRESTfulAPI时,客户端与服务端的数据交互通常使用JSON格式,然而,JSON... 目录问题背景1. 问题描述2. 错误分析解决方案1. 手动重新输入jsON2. 使用工具清理JSON3.

使用jenv工具管理多个JDK版本的方法步骤

《使用jenv工具管理多个JDK版本的方法步骤》jenv是一个开源的Java环境管理工具,旨在帮助开发者在同一台机器上轻松管理和切换多个Java版本,:本文主要介绍使用jenv工具管理多个JD... 目录一、jenv到底是干啥的?二、jenv的核心功能(一)管理多个Java版本(二)支持插件扩展(三)环境隔

MySQL 设置AUTO_INCREMENT 无效的问题解决

《MySQL设置AUTO_INCREMENT无效的问题解决》本文主要介绍了MySQL设置AUTO_INCREMENT无效的问题解决,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参... 目录快速设置mysql的auto_increment参数一、修改 AUTO_INCREMENT 的值。