severstal谢韦尔金属数据集CSV格式转YOLO格式

2024-04-20 00:52

本文主要是介绍severstal谢韦尔金属数据集CSV格式转YOLO格式,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

谢韦尔数据集

在kaggle上即可找到,在csdn、百度、知乎上搜索都能搜到,这里不附下载链接了
谢韦尔数据集的标注为CSV文件,格式如下:
谢韦尔数据集格式
谢韦尔数据集为分割数据集,像素编码格式

格式

谢韦尔数据集为像素编码格式,使用YOLO相关模型进行检测任务,需要进行格式转换。
YOLO的格式为:
类别id 坐标1x 坐标1y 坐标2x 坐标2y 坐标3x 坐标3y 坐标4x 坐标4y…

像素编码格式为:
29102 12 ,为一对,从第29102开始往后数12个像素。

要直接转成YOLO格式的顶点坐标有点困难,所以我采用了先转换为掩码形式,然后再寻找顶点。

处理代码

import os
import cv2
import numpy as np
import pandas as pd
from PIL import Image
from PIL import Image, ImageOpsdef mask_pil2xy(mask_pil,ImageId,ClassId,save_txtfolder):# 转换为 NumPy 数组mask_np = np.array(mask_pil)# 使用阈值化将图像转换为二值图像_, binary_image = cv2.threshold(mask_np, 200, 255, cv2.THRESH_BINARY)# 查找轮廓contours, _ = cv2.findContours(binary_image, cv2.RETR_EXTERNAL, cv2.CHAIN_APPROX_SIMPLE)# 存储有效区域的顶点坐标valid_vertices = []# 设置最小轮廓点数阈值(根据需要调整)min_contour_points = 3label_name=os.path.splitext(ImageId)[0]+ ".txt"save_path = os.path.join(save_txtfolder, label_name)#保存到文件with open(save_path, 'a') as f:# 遍历每个轮廓for contour in contours:# 忽略太小的轮廓if len(contour) < min_contour_points:continue# 获取轮廓的顶点坐标approx = cv2.approxPolyDP(contour, 0.01 * cv2.arcLength(contour, True), True)# 确保轮廓有足够的顶点来形成有效区域if len(approx) >= min_contour_points:# 存储当前区域的顶点坐标# vertices_str = ""vertices_str = f"{ClassId} "for point in approx:x, y = point[0]# 归一化顶点坐标并保留小数点后6位normalized_x = round(x / 1600, 6)normalized_y = round(y / 256, 6)vertices_str += f"{normalized_x} {normalized_y} "# 移除末尾的空格vertices_str = vertices_str[:-1]# 将当前区域的顶点坐标字符串添加到列表中valid_vertices.append(vertices_str + "\n")# 输出所有有效区域的顶点坐标for vertices_str in valid_vertices:print(vertices_str)f.write(vertices_str)def rle2mask(rle, imgshape):width = imgshape[1]height = imgshape[0]mask = np.zeros(width * height, dtype=np.uint8)array = np.asarray([int(x) for x in rle.split()])starts = array[0::2]lengths = array[1::2]for index, start in enumerate(starts):mask[int(start):int(start + lengths[index])] = 1# 将掩码数组重塑为图像尺寸mask = mask.reshape(height, width)# 将 numpy 数组转换为 PIL 图像mask_pil = Image.fromarray(mask * 255)# 旋转图像以横向显示(逆时针旋转90度)mask_pil = mask_pil.rotate(90, expand=True)# 保存掩码图像前进行垂直翻转mask_pil = ImageOps.flip(mask_pil)return mask_pil#路径
# 设置保存标签文件的路径
save_txtfolder = ""
os.makedirs(save_txtfolder, exist_ok=True)  # 确保保存目录存在
save_folder = ""
os.makedirs(save_folder, exist_ok=True)  # 确保保存目录存在# 读取CSV文件
csv_path = ""
df = pd.read_csv(csv_path)# 过滤出带有有效掩码的数据
df_train = df[df['EncodedPixels'].notnull()].reset_index(drop=True)# 处理每个带有有效掩码的样本
for index in range(len(df_train)):ImageId = df_train['ImageId'].iloc[index]  # 获取图像标识ClassId = df_train['ClassId'].iloc[index]  # 获取类别 IDmaskName = ImageId.split(".")[0] + ".png"  # 生成保存的掩码文件名,去除后缀并添加文件扩展名# 生成掩码图像mask_pil = rle2mask(df_train['EncodedPixels'].iloc[index], (1600, 256))mask_pil2xy(mask_pil,ImageId,ClassId,save_txtfolder)save_path = os.path.join(save_folder, maskName)mask_pil.save(save_path)print(f"Saved mask image: {save_path}")

上述内容为作者原创,转载请附上链接

这篇关于severstal谢韦尔金属数据集CSV格式转YOLO格式的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/918893

相关文章

python处理带有时区的日期和时间数据

《python处理带有时区的日期和时间数据》这篇文章主要为大家详细介绍了如何在Python中使用pytz库处理时区信息,包括获取当前UTC时间,转换为特定时区等,有需要的小伙伴可以参考一下... 目录时区基本信息python datetime使用timezonepandas处理时区数据知识延展时区基本信息

Qt实现网络数据解析的方法总结

《Qt实现网络数据解析的方法总结》在Qt中解析网络数据通常涉及接收原始字节流,并将其转换为有意义的应用层数据,这篇文章为大家介绍了详细步骤和示例,感兴趣的小伙伴可以了解下... 目录1. 网络数据接收2. 缓冲区管理(处理粘包/拆包)3. 常见数据格式解析3.1 jsON解析3.2 XML解析3.3 自定义

SpringMVC 通过ajax 前后端数据交互的实现方法

《SpringMVC通过ajax前后端数据交互的实现方法》:本文主要介绍SpringMVC通过ajax前后端数据交互的实现方法,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价... 在前端的开发过程中,经常在html页面通过AJAX进行前后端数据的交互,SpringMVC的controll

Pandas统计每行数据中的空值的方法示例

《Pandas统计每行数据中的空值的方法示例》处理缺失数据(NaN值)是一个非常常见的问题,本文主要介绍了Pandas统计每行数据中的空值的方法示例,具有一定的参考价值,感兴趣的可以了解一下... 目录什么是空值?为什么要统计空值?准备工作创建示例数据统计每行空值数量进一步分析www.chinasem.cn处

如何使用 Python 读取 Excel 数据

《如何使用Python读取Excel数据》:本文主要介绍使用Python读取Excel数据的详细教程,通过pandas和openpyxl,你可以轻松读取Excel文件,并进行各种数据处理操... 目录使用 python 读取 Excel 数据的详细教程1. 安装必要的依赖2. 读取 Excel 文件3. 读

Spring 请求之传递 JSON 数据的操作方法

《Spring请求之传递JSON数据的操作方法》JSON就是一种数据格式,有自己的格式和语法,使用文本表示一个对象或数组的信息,因此JSON本质是字符串,主要负责在不同的语言中数据传递和交换,这... 目录jsON 概念JSON 语法JSON 的语法JSON 的两种结构JSON 字符串和 Java 对象互转

C++如何通过Qt反射机制实现数据类序列化

《C++如何通过Qt反射机制实现数据类序列化》在C++工程中经常需要使用数据类,并对数据类进行存储、打印、调试等操作,所以本文就来聊聊C++如何通过Qt反射机制实现数据类序列化吧... 目录设计预期设计思路代码实现使用方法在 C++ 工程中经常需要使用数据类,并对数据类进行存储、打印、调试等操作。由于数据类

SpringBoot使用GZIP压缩反回数据问题

《SpringBoot使用GZIP压缩反回数据问题》:本文主要介绍SpringBoot使用GZIP压缩反回数据问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录SpringBoot使用GZIP压缩反回数据1、初识gzip2、gzip是什么,可以干什么?3、Spr

HTML5表格语法格式详解

《HTML5表格语法格式详解》在HTML语法中,表格主要通过table、tr和td3个标签构成,本文通过实例代码讲解HTML5表格语法格式,感兴趣的朋友一起看看吧... 目录一、表格1.表格语法格式2.表格属性 3.例子二、不规则表格1.跨行2.跨列3.例子一、表格在html语法中,表格主要通过< tab

QT进行CSV文件初始化与读写操作

《QT进行CSV文件初始化与读写操作》这篇文章主要为大家详细介绍了在QT环境中如何进行CSV文件的初始化、写入和读取操作,本文为大家整理了相关的操作的多种方法,希望对大家有所帮助... 目录前言一、CSV文件初始化二、CSV写入三、CSV读取四、QT 逐行读取csv文件五、Qt如何将数据保存成CSV文件前言