MNIST手写体数字数据集

2023-12-31 13:38
文章标签 数据 数字 mnist 手写体

本文主要是介绍MNIST手写体数字数据集,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

MNIST手写体数字数据集

本文从MNIST数据集的文件、文件格式、存储方式以及使用C++对其读取的流程(最终保存为图片)进行介绍。

  1. MNIST原始数据文件在这里插入图片描述包含以上4个数据文件

  2. 文件格式
    以下只以训练集图片文件为例说明:
    <div<|--|--|魔数,其实就是一个校验数,用来判断这个文件是不是MNIST里面的train-labels.idx1-ubyte文件;

3.数据集
训练样本:共60000个,
其中55000个用于训练,另外5000个用于验证(评估训练过程中的准确度);
测试样本:共10000个(评估最终模型的准确度);
所有数字图像已经进行尺寸归一化、数字居中处理,固定尺寸为28×28像素。

  1. MNIST大端存储方式
        大端存储:高位字节放在内存低地址,
                          低位字节放在内存高地址;
    区别于C/C++变量中的小端存储
        小端存储:低位字节放在内存低地址,
                          高位字节放在内存高地址;
  2. C++读取MNIST数据集读取流程

  3. 代码
#include <opencv2/imgproc/imgproc.hpp>  
#include <opencv2/highgui/highgui.hpp>  
#include <opencv2/core/core.hpp>  
#include <vector>  
#include <iostream>  
#include <fstream>  
#include <string>  
#include<inttypes.h>
using namespace std;
using namespace cv;//把大端数据转换为我们常用的小端数据  
uint32_t swap_endian(uint32_t val)
{val = ((val << 8) & 0xFF00FF00) | ((val >> 8) & 0xFF00FF);return (val << 16) | (val >> 16);
}void readAndSave(const string& mnist_img_path, const string& mnist_label_path)
{//以二进制格式读取mnist数据库中的图像文件和标签文件  ifstream mnist_image(mnist_img_path, ios::in | ios::binary);ifstream mnist_label(mnist_label_path, ios::in | ios::binary);if (mnist_image.is_open() == false || mnist_label.is_open() == false){cout << "open mnist image or lable file error!" << endl;return;}uint32_t magic;//文件中的魔术数(magic number)  uint32_t num_items;//mnist图像集文件中的图像数目  uint32_t num_label;//mnist标签集文件中的标签数目  uint32_t rows;//图像的行数  uint32_t cols;//图像的列数  //读魔术数  mnist_image.read(reinterpret_cast<char*>(&magic), 4);magic = swap_endian(magic);if (magic != 2051){cout << "this is not the mnist image file" << endl;return;}mnist_label.read(reinterpret_cast<char*>(&magic), 4);magic = swap_endian(magic);if (magic != 2049){cout << "this is not the mnist label file" << endl;return;}//读图像/标签数  mnist_image.read(reinterpret_cast<char*>(&num_items), 4);num_items = swap_endian(num_items);mnist_label.read(reinterpret_cast<char*>(&num_label), 4);num_label = swap_endian(num_label);//判断两种标签数是否相等  if (num_items != num_label){cout << "the image file and label file are not a pair" << endl;}//读图像行数、列数  mnist_image.read(reinterpret_cast<char*>(&rows), 4);rows = swap_endian(rows);mnist_image.read(reinterpret_cast<char*>(&cols), 4);cols = swap_endian(cols);//读取图像  for (int i = 0; i != num_items; i++){char* pixels = new char[rows * cols];mnist_image.read(pixels, rows * cols);char label;mnist_label.read(&label, 1);Mat image(rows, cols, CV_8UC1);for (int m = 0; m != rows; m++){uchar* ptr = image.ptr<uchar>(m);for (int n = 0; n != cols; n++){if (pixels[m * cols + n] == 0)ptr[n] = 0;elseptr[n] = 255;}}string saveFile = "E:\\visual studio 2015 Projects\\MNIST\\MNIST\\MNISTIMAGE\\" + to_string((unsigned int)label) + "_" + to_string(i) + ".jpg";//文件保存路径imwrite(saveFile, image);}
}int main()
{readAndSave("E:\\visual studio 2015 Projects\\MNIST\\MNIST\\t10k-images.idx3-ubyte", "E:\\visual studio 2015 Projects\\MNIST\\MNIST\\t10k-labels.idx1-ubyte");return 0;
}

以上就是关于MNIST手写体数字数据集的相关介绍,希望对你有用哦!

这篇关于MNIST手写体数字数据集的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/556183

相关文章

SQL Server修改数据库名及物理数据文件名操作步骤

《SQLServer修改数据库名及物理数据文件名操作步骤》在SQLServer中重命名数据库是一个常见的操作,但需要确保用户具有足够的权限来执行此操作,:本文主要介绍SQLServer修改数据... 目录一、背景介绍二、操作步骤2.1 设置为单用户模式(断开连接)2.2 修改数据库名称2.3 查找逻辑文件名

canal实现mysql数据同步的详细过程

《canal实现mysql数据同步的详细过程》:本文主要介绍canal实现mysql数据同步的详细过程,本文通过实例图文相结合给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的... 目录1、canal下载2、mysql同步用户创建和授权3、canal admin安装和启动4、canal

使用SpringBoot整合Sharding Sphere实现数据脱敏的示例

《使用SpringBoot整合ShardingSphere实现数据脱敏的示例》ApacheShardingSphere数据脱敏模块,通过SQL拦截与改写实现敏感信息加密存储,解决手动处理繁琐及系统改... 目录痛点一:痛点二:脱敏配置Quick Start——Spring 显示配置:1.引入依赖2.创建脱敏

详解如何使用Python构建从数据到文档的自动化工作流

《详解如何使用Python构建从数据到文档的自动化工作流》这篇文章将通过真实工作场景拆解,为大家展示如何用Python构建自动化工作流,让工具代替人力完成这些数字苦力活,感兴趣的小伙伴可以跟随小编一起... 目录一、Excel处理:从数据搬运工到智能分析师二、PDF处理:文档工厂的智能生产线三、邮件自动化:

Python数据分析与可视化的全面指南(从数据清洗到图表呈现)

《Python数据分析与可视化的全面指南(从数据清洗到图表呈现)》Python是数据分析与可视化领域中最受欢迎的编程语言之一,凭借其丰富的库和工具,Python能够帮助我们快速处理、分析数据并生成高质... 目录一、数据采集与初步探索二、数据清洗的七种武器1. 缺失值处理策略2. 异常值检测与修正3. 数据

pandas实现数据concat拼接的示例代码

《pandas实现数据concat拼接的示例代码》pandas.concat用于合并DataFrame或Series,本文主要介绍了pandas实现数据concat拼接的示例代码,具有一定的参考价值,... 目录语法示例:使用pandas.concat合并数据默认的concat:参数axis=0,join=

C#代码实现解析WTGPS和BD数据

《C#代码实现解析WTGPS和BD数据》在现代的导航与定位应用中,准确解析GPS和北斗(BD)等卫星定位数据至关重要,本文将使用C#语言实现解析WTGPS和BD数据,需要的可以了解下... 目录一、代码结构概览1. 核心解析方法2. 位置信息解析3. 经纬度转换方法4. 日期和时间戳解析5. 辅助方法二、L

使用Python和Matplotlib实现可视化字体轮廓(从路径数据到矢量图形)

《使用Python和Matplotlib实现可视化字体轮廓(从路径数据到矢量图形)》字体设计和矢量图形处理是编程中一个有趣且实用的领域,通过Python的matplotlib库,我们可以轻松将字体轮廓... 目录背景知识字体轮廓的表示实现步骤1. 安装依赖库2. 准备数据3. 解析路径指令4. 绘制图形关键

解决mysql插入数据锁等待超时报错:Lock wait timeout exceeded;try restarting transaction

《解决mysql插入数据锁等待超时报错:Lockwaittimeoutexceeded;tryrestartingtransaction》:本文主要介绍解决mysql插入数据锁等待超时报... 目录报错信息解决办法1、数据库中执行如下sql2、再到 INNODB_TRX 事务表中查看总结报错信息Lock

使用C#删除Excel表格中的重复行数据的代码详解

《使用C#删除Excel表格中的重复行数据的代码详解》重复行是指在Excel表格中完全相同的多行数据,删除这些重复行至关重要,因为它们不仅会干扰数据分析,还可能导致错误的决策和结论,所以本文给大家介绍... 目录简介使用工具C# 删除Excel工作表中的重复行语法工作原理实现代码C# 删除指定Excel单元