severstal谢韦尔金属数据集CSV格式转YOLO格式

2024-04-20 00:52

本文主要是介绍severstal谢韦尔金属数据集CSV格式转YOLO格式,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

谢韦尔数据集

在kaggle上即可找到,在csdn、百度、知乎上搜索都能搜到,这里不附下载链接了
谢韦尔数据集的标注为CSV文件,格式如下:
谢韦尔数据集格式
谢韦尔数据集为分割数据集,像素编码格式

格式

谢韦尔数据集为像素编码格式,使用YOLO相关模型进行检测任务,需要进行格式转换。
YOLO的格式为:
类别id 坐标1x 坐标1y 坐标2x 坐标2y 坐标3x 坐标3y 坐标4x 坐标4y…

像素编码格式为:
29102 12 ,为一对,从第29102开始往后数12个像素。

要直接转成YOLO格式的顶点坐标有点困难,所以我采用了先转换为掩码形式,然后再寻找顶点。

处理代码

import os
import cv2
import numpy as np
import pandas as pd
from PIL import Image
from PIL import Image, ImageOpsdef mask_pil2xy(mask_pil,ImageId,ClassId,save_txtfolder):# 转换为 NumPy 数组mask_np = np.array(mask_pil)# 使用阈值化将图像转换为二值图像_, binary_image = cv2.threshold(mask_np, 200, 255, cv2.THRESH_BINARY)# 查找轮廓contours, _ = cv2.findContours(binary_image, cv2.RETR_EXTERNAL, cv2.CHAIN_APPROX_SIMPLE)# 存储有效区域的顶点坐标valid_vertices = []# 设置最小轮廓点数阈值(根据需要调整)min_contour_points = 3label_name=os.path.splitext(ImageId)[0]+ ".txt"save_path = os.path.join(save_txtfolder, label_name)#保存到文件with open(save_path, 'a') as f:# 遍历每个轮廓for contour in contours:# 忽略太小的轮廓if len(contour) < min_contour_points:continue# 获取轮廓的顶点坐标approx = cv2.approxPolyDP(contour, 0.01 * cv2.arcLength(contour, True), True)# 确保轮廓有足够的顶点来形成有效区域if len(approx) >= min_contour_points:# 存储当前区域的顶点坐标# vertices_str = ""vertices_str = f"{ClassId} "for point in approx:x, y = point[0]# 归一化顶点坐标并保留小数点后6位normalized_x = round(x / 1600, 6)normalized_y = round(y / 256, 6)vertices_str += f"{normalized_x} {normalized_y} "# 移除末尾的空格vertices_str = vertices_str[:-1]# 将当前区域的顶点坐标字符串添加到列表中valid_vertices.append(vertices_str + "\n")# 输出所有有效区域的顶点坐标for vertices_str in valid_vertices:print(vertices_str)f.write(vertices_str)def rle2mask(rle, imgshape):width = imgshape[1]height = imgshape[0]mask = np.zeros(width * height, dtype=np.uint8)array = np.asarray([int(x) for x in rle.split()])starts = array[0::2]lengths = array[1::2]for index, start in enumerate(starts):mask[int(start):int(start + lengths[index])] = 1# 将掩码数组重塑为图像尺寸mask = mask.reshape(height, width)# 将 numpy 数组转换为 PIL 图像mask_pil = Image.fromarray(mask * 255)# 旋转图像以横向显示(逆时针旋转90度)mask_pil = mask_pil.rotate(90, expand=True)# 保存掩码图像前进行垂直翻转mask_pil = ImageOps.flip(mask_pil)return mask_pil#路径
# 设置保存标签文件的路径
save_txtfolder = ""
os.makedirs(save_txtfolder, exist_ok=True)  # 确保保存目录存在
save_folder = ""
os.makedirs(save_folder, exist_ok=True)  # 确保保存目录存在# 读取CSV文件
csv_path = ""
df = pd.read_csv(csv_path)# 过滤出带有有效掩码的数据
df_train = df[df['EncodedPixels'].notnull()].reset_index(drop=True)# 处理每个带有有效掩码的样本
for index in range(len(df_train)):ImageId = df_train['ImageId'].iloc[index]  # 获取图像标识ClassId = df_train['ClassId'].iloc[index]  # 获取类别 IDmaskName = ImageId.split(".")[0] + ".png"  # 生成保存的掩码文件名,去除后缀并添加文件扩展名# 生成掩码图像mask_pil = rle2mask(df_train['EncodedPixels'].iloc[index], (1600, 256))mask_pil2xy(mask_pil,ImageId,ClassId,save_txtfolder)save_path = os.path.join(save_folder, maskName)mask_pil.save(save_path)print(f"Saved mask image: {save_path}")

上述内容为作者原创,转载请附上链接

这篇关于severstal谢韦尔金属数据集CSV格式转YOLO格式的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/918893

相关文章

解决pandas无法读取csv文件数据的问题

《解决pandas无法读取csv文件数据的问题》本文讲述作者用Pandas读取CSV文件时因参数设置不当导致数据错位,通过调整delimiter和on_bad_lines参数最终解决问题,并强调正确参... 目录一、前言二、问题复现1. 问题2. 通过 on_bad_lines=‘warn’ 跳过异常数据3

C#监听txt文档获取新数据方式

《C#监听txt文档获取新数据方式》文章介绍通过监听txt文件获取最新数据,并实现开机自启动、禁用窗口关闭按钮、阻止Ctrl+C中断及防止程序退出等功能,代码整合于主函数中,供参考学习... 目录前言一、监听txt文档增加数据二、其他功能1. 设置开机自启动2. 禁止控制台窗口关闭按钮3. 阻止Ctrl +

java如何实现高并发场景下三级缓存的数据一致性

《java如何实现高并发场景下三级缓存的数据一致性》这篇文章主要为大家详细介绍了java如何实现高并发场景下三级缓存的数据一致性,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 下面代码是一个使用Java和Redisson实现的三级缓存服务,主要功能包括:1.缓存结构:本地缓存:使

SpringBoot 异常处理/自定义格式校验的问题实例详解

《SpringBoot异常处理/自定义格式校验的问题实例详解》文章探讨SpringBoot中自定义注解校验问题,区分参数级与类级约束触发的异常类型,建议通过@RestControllerAdvice... 目录1. 问题简要描述2. 异常触发1) 参数级别约束2) 类级别约束3. 异常处理1) 字段级别约束

在MySQL中实现冷热数据分离的方法及使用场景底层原理解析

《在MySQL中实现冷热数据分离的方法及使用场景底层原理解析》MySQL冷热数据分离通过分表/分区策略、数据归档和索引优化,将频繁访问的热数据与冷数据分开存储,提升查询效率并降低存储成本,适用于高并发... 目录实现冷热数据分离1. 分表策略2. 使用分区表3. 数据归档与迁移在mysql中实现冷热数据分

C#解析JSON数据全攻略指南

《C#解析JSON数据全攻略指南》这篇文章主要为大家详细介绍了使用C#解析JSON数据全攻略指南,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录一、为什么jsON是C#开发必修课?二、四步搞定网络JSON数据1. 获取数据 - HttpClient最佳实践2. 动态解析 - 快速

MyBatis-Plus通用中等、大量数据分批查询和处理方法

《MyBatis-Plus通用中等、大量数据分批查询和处理方法》文章介绍MyBatis-Plus分页查询处理,通过函数式接口与Lambda表达式实现通用逻辑,方法抽象但功能强大,建议扩展分批处理及流式... 目录函数式接口获取分页数据接口数据处理接口通用逻辑工具类使用方法简单查询自定义查询方法总结函数式接口

SQL中如何添加数据(常见方法及示例)

《SQL中如何添加数据(常见方法及示例)》SQL全称为StructuredQueryLanguage,是一种用于管理关系数据库的标准编程语言,下面给大家介绍SQL中如何添加数据,感兴趣的朋友一起看看吧... 目录在mysql中,有多种方法可以添加数据。以下是一些常见的方法及其示例。1. 使用INSERT I

Python使用vllm处理多模态数据的预处理技巧

《Python使用vllm处理多模态数据的预处理技巧》本文深入探讨了在Python环境下使用vLLM处理多模态数据的预处理技巧,我们将从基础概念出发,详细讲解文本、图像、音频等多模态数据的预处理方法,... 目录1. 背景介绍1.1 目的和范围1.2 预期读者1.3 文档结构概述1.4 术语表1.4.1 核

MySQL 删除数据详解(最新整理)

《MySQL删除数据详解(最新整理)》:本文主要介绍MySQL删除数据的相关知识,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧... 目录一、前言二、mysql 中的三种删除方式1.DELETE语句✅ 基本语法: 示例:2.TRUNCATE语句✅ 基本语