MNIST手写体数字数据集

2023-12-31 13:38
文章标签 数据 数字 mnist 手写体

本文主要是介绍MNIST手写体数字数据集,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

MNIST手写体数字数据集

本文从MNIST数据集的文件、文件格式、存储方式以及使用C++对其读取的流程(最终保存为图片)进行介绍。

  1. MNIST原始数据文件在这里插入图片描述包含以上4个数据文件

  2. 文件格式
    以下只以训练集图片文件为例说明:
    <div<|--|--|魔数,其实就是一个校验数,用来判断这个文件是不是MNIST里面的train-labels.idx1-ubyte文件;

3.数据集
训练样本:共60000个,
其中55000个用于训练,另外5000个用于验证(评估训练过程中的准确度);
测试样本:共10000个(评估最终模型的准确度);
所有数字图像已经进行尺寸归一化、数字居中处理,固定尺寸为28×28像素。

  1. MNIST大端存储方式
        大端存储:高位字节放在内存低地址,
                          低位字节放在内存高地址;
    区别于C/C++变量中的小端存储
        小端存储:低位字节放在内存低地址,
                          高位字节放在内存高地址;
  2. C++读取MNIST数据集读取流程

  3. 代码
#include <opencv2/imgproc/imgproc.hpp>  
#include <opencv2/highgui/highgui.hpp>  
#include <opencv2/core/core.hpp>  
#include <vector>  
#include <iostream>  
#include <fstream>  
#include <string>  
#include<inttypes.h>
using namespace std;
using namespace cv;//把大端数据转换为我们常用的小端数据  
uint32_t swap_endian(uint32_t val)
{val = ((val << 8) & 0xFF00FF00) | ((val >> 8) & 0xFF00FF);return (val << 16) | (val >> 16);
}void readAndSave(const string& mnist_img_path, const string& mnist_label_path)
{//以二进制格式读取mnist数据库中的图像文件和标签文件  ifstream mnist_image(mnist_img_path, ios::in | ios::binary);ifstream mnist_label(mnist_label_path, ios::in | ios::binary);if (mnist_image.is_open() == false || mnist_label.is_open() == false){cout << "open mnist image or lable file error!" << endl;return;}uint32_t magic;//文件中的魔术数(magic number)  uint32_t num_items;//mnist图像集文件中的图像数目  uint32_t num_label;//mnist标签集文件中的标签数目  uint32_t rows;//图像的行数  uint32_t cols;//图像的列数  //读魔术数  mnist_image.read(reinterpret_cast<char*>(&magic), 4);magic = swap_endian(magic);if (magic != 2051){cout << "this is not the mnist image file" << endl;return;}mnist_label.read(reinterpret_cast<char*>(&magic), 4);magic = swap_endian(magic);if (magic != 2049){cout << "this is not the mnist label file" << endl;return;}//读图像/标签数  mnist_image.read(reinterpret_cast<char*>(&num_items), 4);num_items = swap_endian(num_items);mnist_label.read(reinterpret_cast<char*>(&num_label), 4);num_label = swap_endian(num_label);//判断两种标签数是否相等  if (num_items != num_label){cout << "the image file and label file are not a pair" << endl;}//读图像行数、列数  mnist_image.read(reinterpret_cast<char*>(&rows), 4);rows = swap_endian(rows);mnist_image.read(reinterpret_cast<char*>(&cols), 4);cols = swap_endian(cols);//读取图像  for (int i = 0; i != num_items; i++){char* pixels = new char[rows * cols];mnist_image.read(pixels, rows * cols);char label;mnist_label.read(&label, 1);Mat image(rows, cols, CV_8UC1);for (int m = 0; m != rows; m++){uchar* ptr = image.ptr<uchar>(m);for (int n = 0; n != cols; n++){if (pixels[m * cols + n] == 0)ptr[n] = 0;elseptr[n] = 255;}}string saveFile = "E:\\visual studio 2015 Projects\\MNIST\\MNIST\\MNISTIMAGE\\" + to_string((unsigned int)label) + "_" + to_string(i) + ".jpg";//文件保存路径imwrite(saveFile, image);}
}int main()
{readAndSave("E:\\visual studio 2015 Projects\\MNIST\\MNIST\\t10k-images.idx3-ubyte", "E:\\visual studio 2015 Projects\\MNIST\\MNIST\\t10k-labels.idx1-ubyte");return 0;
}

以上就是关于MNIST手写体数字数据集的相关介绍,希望对你有用哦!

这篇关于MNIST手写体数字数据集的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/556183

相关文章

Python实现数据可视化图表生成(适合新手入门)

《Python实现数据可视化图表生成(适合新手入门)》在数据科学和数据分析的新时代,高效、直观的数据可视化工具显得尤为重要,下面:本文主要介绍Python实现数据可视化图表生成的相关资料,文中通过... 目录前言为什么需要数据可视化准备工作基本图表绘制折线图柱状图散点图使用Seaborn创建高级图表箱线图热

基于Python实现数字限制在指定范围内的五种方式

《基于Python实现数字限制在指定范围内的五种方式》在编程中,数字范围限制是常见需求,无论是游戏开发中的角色属性值、金融计算中的利率调整,还是传感器数据处理中的异常值过滤,都需要将数字控制在合理范围... 目录引言一、基础条件判断法二、数学运算巧解法三、装饰器模式法四、自定义类封装法五、NumPy数组处理

MySQL数据脱敏的实现方法

《MySQL数据脱敏的实现方法》本文主要介绍了MySQL数据脱敏的实现方法,包括字符替换、加密等方法,通过工具类和数据库服务整合,确保敏感信息在查询结果中被掩码处理,感兴趣的可以了解一下... 目录一. 数据脱敏的方法二. 字符替换脱敏1. 创建数据脱敏工具类三. 整合到数据库操作1. 创建服务类进行数据库

MySQL中处理数据的并发一致性的实现示例

《MySQL中处理数据的并发一致性的实现示例》在MySQL中处理数据的并发一致性是确保多个用户或应用程序同时访问和修改数据库时,不会导致数据冲突、数据丢失或数据不一致,MySQL通过事务和锁机制来管理... 目录一、事务(Transactions)1. 事务控制语句二、锁(Locks)1. 锁类型2. 锁粒

Qt中实现多线程导出数据功能的四种方式小结

《Qt中实现多线程导出数据功能的四种方式小结》在以往的项目开发中,在很多地方用到了多线程,本文将记录下在Qt开发中用到的多线程技术实现方法,以导出指定范围的数字到txt文件为例,展示多线程不同的实现方... 目录前言导出文件的示例工具类QThreadQObject的moveToThread方法实现多线程QC

SpringBoot集成EasyExcel实现百万级别的数据导入导出实践指南

《SpringBoot集成EasyExcel实现百万级别的数据导入导出实践指南》本文将基于开源项目springboot-easyexcel-batch进行解析与扩展,手把手教大家如何在SpringBo... 目录项目结构概览核心依赖百万级导出实战场景核心代码效果百万级导入实战场景监听器和Service(核心

使用Python开发一个Ditto剪贴板数据导出工具

《使用Python开发一个Ditto剪贴板数据导出工具》在日常工作中,我们经常需要处理大量的剪贴板数据,下面将介绍如何使用Python的wxPython库开发一个图形化工具,实现从Ditto数据库中读... 目录前言运行结果项目需求分析技术选型核心功能实现1. Ditto数据库结构分析2. 数据库自动定位3

pandas数据的合并concat()和merge()方式

《pandas数据的合并concat()和merge()方式》Pandas中concat沿轴合并数据框(行或列),merge基于键连接(内/外/左/右),concat用于纵向或横向拼接,merge用于... 目录concat() 轴向连接合并(1) join='outer',axis=0(2)join='o

批量导入txt数据到的redis过程

《批量导入txt数据到的redis过程》用户通过将Redis命令逐行写入txt文件,利用管道模式运行客户端,成功执行批量删除以Product*匹配的Key操作,提高了数据清理效率... 目录批量导入txt数据到Redisjs把redis命令按一条 一行写到txt中管道命令运行redis客户端成功了批量删除k

SpringBoot多环境配置数据读取方式

《SpringBoot多环境配置数据读取方式》SpringBoot通过环境隔离机制,支持properties/yaml/yml多格式配置,结合@Value、Environment和@Configura... 目录一、多环境配置的核心思路二、3种配置文件格式详解2.1 properties格式(传统格式)1.