Python 全栈体系【四阶】(三十)

2024-04-12 22:28

本文主要是介绍Python 全栈体系【四阶】(三十),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

第五章 深度学习

四、Tensorflow

请添加图片描述

8. 模型保存与加载

8.1 什么是模型保存与加载

模型训练可能是一个很长的过程,如果每次执行预测之前都重新训练,会非常耗时,所以几乎所有人工智能框架都提供了模型保存与加载功能,使得模型训练完成后,可以保存到文件中,供其它程序使用或继续训练。

8.2 模型保存与加载 API

模型保存与加载通过 tf.train.Saver 对象完成,实例化对象:

  • saver = tf.train.Saver(var_list=None, max_to_keep=5) - var_list: 要保存和还原的变量,可以是一个 dict 或一个列表 - max_to_keep: 要保留的最近检查点文件的最大数量。创建新文件时,会删除较旧的文件
    (如 max_to_keep=5 表示保留 5 个检查点文件)

保存:saver.save(sess, ‘/tmp/ckpt/model’)

加载:saver.restore(sess, ‘/tmp/ckpt/model’)

8.3 案例 1:模型保存/加载

在这里插入图片描述

从执行结果可以看出,如果模型之前经过训练,直接从之前的参数值开始执行迭代,而不是从第一次给的初始值开始。

在这里插入图片描述

9. 数据读取

请添加图片描述

9.1 文件读取机制

TensorFlow 文件读取分为三个步骤:

  • 第一步:将要读取的文件放入文件名队列
  • 第二步:读取文件内容,并实行解码
  • 第三步:批处理,按照指定笔数构建成一个批次取出

在这里插入图片描述

9.2 文件读取 API
9.2.1 文件队列构造

生成一个先入先出的队列, 文件阅读器会需要它来读取数据

  • tf.train.string_input_producer(string_tensor, shuffle=True)
    • string_tensor: 含有文件名的一阶张量
    • shuffle: 是否打乱文件顺序
  • 返回:文件队列
9.2.2 文件读取
  • 文本文件读取:tf.TextLineReader
    • 读取 CSV 文件,默认按行读取
  • 二进制文件读取:tf.FixedLengthRecordReader(record_bytes)
    • 读取每个记录是固定字节的二进制文件
    • record_bytes: 每次读取的字节数
  • 通用读取方法:read(file_queue)
    • 从队列中读取指定数量(行,字节)的内容
    • 返回值:一个 tensor 元组,(文件名, value)
9.2.3 文件内容解码

解码文本文件:tf.decode_csv(records, record_defaults)

  • 将 CSV 文件内容转换为张量,与 tf.TextLineReader 搭配使用
  • 参数:
    • records: 字符串,对应文件中的一行
    • record_defaults: 类型
  • 返回:tensor 对象列表

解码二进制文件:tf.decode_raw(input_bytes, out_type)

  • 将字节转换为由数字表示的张量,与 tf.FixedLengthRecordReader 搭配使用
  • 参数:
    • input_bytes - 待转换字节
    • out_type - 输出类型
  • 返回:转换结果
9.3 案例 2:CSV 文件读取

在这里插入图片描述
在这里插入图片描述

9.4 图片文件读取 API

图像读取器:tf.WholeFileReader

  • 功能:将文件的全部内容作为值输出的 reader
  • read 方法:读取文件内容,返回文件名和文件内容

图像解码器:

  • tf.image.decode_jpeg(constants) : 解码 jpeg 格式
  • tf.image.decode_png(constants) : 解码 png 格式
  • 返回值:3-D 张量,[height, width, channels]

修改图像大小:tf.image.resize(images, size)

  • images:图片数据,3-D 或 4-D 张量
    • 3-D:[长,宽,通道]
    • 4-D:[数量, 长,宽,通道]
  • size:1-D int32 张量,[长、宽] (不需要传通道数)
9.5 案例 3:图片文件读取

在这里插入图片描述
在这里插入图片描述

10. 手写体识别

请添加图片描述

10.1 MNIST 数据集

手写数字的数据集,来自美国国家标准与技术研究所(National Institute of Standards and Technology,NIST),发布于 1998 年。

样本来自 250 个不同人的手写数字,50%高中学生,50%是人口普查局的工作人员。

数字从 0 ~ 9,图片大小是 28×28 像素,训练数据集包含 60000 个样本,测试数据集包含 10000 个样本。数据集的标签是长度为 10 的一维数组,数组中每个元素索引号表示对应数字出现的概率。

下载地址:http://yann.lecun.com/exdb/mnist/

在这里插入图片描述

10.2 任务目标

根据训练集样本进行模型训练

保存模型

加载模型,用于新的手写体数字识别

10.3 网络结构

请添加图片描述

10.4 相关 API

tf.matmul():执行矩阵乘法计算

tf.nn.softmax():softmax 激活函数

tf.reduce_sum():指定维度上求张量和

tf.train.GradientDescentOptimizer():优化器,执行梯度下降

tf.argmax():返回张量最大元素的索引值

10.5 关键代码

定义数据

在这里插入图片描述
模型搭建

在这里插入图片描述
执行训练

在这里插入图片描述
模型评估

在这里插入图片描述
模型测试
在这里插入图片描述

10.6 执行结果

在这里插入图片描述

11. 服饰识别

11.1 数据集介绍

是来自 Zalando 文章的数据集,是时尚版的 MNIST。包括 60,000 个训练集数据,10,000 个测试集数据,每个数据为 28x28 灰度图像,一共有 10 类:

0T-shirt/topT 恤
1Trouser裤子
2Pullover套衫
3Dress衣服
4Coat外套
5Sandal凉鞋
6Shirt衬衫
7Sneaker运动鞋
8Bag
9Ankle boot短靴

在这里插入图片描述

11.2 任务目标

搭建卷积神经网络模型

根据训练集样本进行模型训练

用于新的服饰图片识别

11.3 网络结构

请添加图片描述

11.4 关键代码

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

11.5 执行结果

在这里插入图片描述

这篇关于Python 全栈体系【四阶】(三十)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/898409

相关文章

Python版本信息获取方法详解与实战

《Python版本信息获取方法详解与实战》在Python开发中,获取Python版本号是调试、兼容性检查和版本控制的重要基础操作,本文详细介绍了如何使用sys和platform模块获取Python的主... 目录1. python版本号获取基础2. 使用sys模块获取版本信息2.1 sys模块概述2.1.1

一文详解Python如何开发游戏

《一文详解Python如何开发游戏》Python是一种非常流行的编程语言,也可以用来开发游戏模组,:本文主要介绍Python如何开发游戏的相关资料,文中通过代码介绍的非常详细,需要的朋友可以参考下... 目录一、python简介二、Python 开发 2D 游戏的优劣势优势缺点三、Python 开发 3D

Python函数作用域与闭包举例深度解析

《Python函数作用域与闭包举例深度解析》Python函数的作用域规则和闭包是编程中的关键概念,它们决定了变量的访问和生命周期,:本文主要介绍Python函数作用域与闭包的相关资料,文中通过代码... 目录1. 基础作用域访问示例1:访问全局变量示例2:访问外层函数变量2. 闭包基础示例3:简单闭包示例4

Python实现字典转字符串的五种方法

《Python实现字典转字符串的五种方法》本文介绍了在Python中如何将字典数据结构转换为字符串格式的多种方法,首先可以通过内置的str()函数进行简单转换;其次利用ison.dumps()函数能够... 目录1、使用json模块的dumps方法:2、使用str方法:3、使用循环和字符串拼接:4、使用字符

Python版本与package版本兼容性检查方法总结

《Python版本与package版本兼容性检查方法总结》:本文主要介绍Python版本与package版本兼容性检查方法的相关资料,文中提供四种检查方法,分别是pip查询、conda管理、PyP... 目录引言为什么会出现兼容性问题方法一:用 pip 官方命令查询可用版本方法二:conda 管理包环境方法

基于Python开发Windows自动更新控制工具

《基于Python开发Windows自动更新控制工具》在当今数字化时代,操作系统更新已成为计算机维护的重要组成部分,本文介绍一款基于Python和PyQt5的Windows自动更新控制工具,有需要的可... 目录设计原理与技术实现系统架构概述数学建模工具界面完整代码实现技术深度分析多层级控制理论服务层控制注

pycharm跑python项目易出错的问题总结

《pycharm跑python项目易出错的问题总结》:本文主要介绍pycharm跑python项目易出错问题的相关资料,当你在PyCharm中运行Python程序时遇到报错,可以按照以下步骤进行排... 1. 一定不要在pycharm终端里面创建环境安装别人的项目子模块等,有可能出现的问题就是你不报错都安装

Python打包成exe常用的四种方法小结

《Python打包成exe常用的四种方法小结》本文主要介绍了Python打包成exe常用的四种方法,包括PyInstaller、cx_Freeze、Py2exe、Nuitka,文中通过示例代码介绍的非... 目录一.PyInstaller11.安装:2. PyInstaller常用参数下面是pyinstal

Python爬虫HTTPS使用requests,httpx,aiohttp实战中的证书异步等问题

《Python爬虫HTTPS使用requests,httpx,aiohttp实战中的证书异步等问题》在爬虫工程里,“HTTPS”是绕不开的话题,HTTPS为传输加密提供保护,同时也给爬虫带来证书校验、... 目录一、核心问题与优先级检查(先问三件事)二、基础示例:requests 与证书处理三、高并发选型:

Python中isinstance()函数原理解释及详细用法示例

《Python中isinstance()函数原理解释及详细用法示例》isinstance()是Python内置的一个非常有用的函数,用于检查一个对象是否属于指定的类型或类型元组中的某一个类型,它是Py... 目录python中isinstance()函数原理解释及详细用法指南一、isinstance()函数