C++卷积神经网络实例:tiny_cnn代码详解(5)——convolutional_layer类结构信息之其他成员函数

本文主要是介绍C++卷积神经网络实例:tiny_cnn代码详解(5)——convolutional_layer类结构信息之其他成员函数,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

  在上一篇博客中我们介绍了convolutional_layer类的基本结构及其成员变量、构造函数的相关信息,在这篇博文中我们对其中剩余的其他成员函数进行分析。首先把convolutional_layer类的结构图给出来:

  可见,convolutional_layer类除了构造函数之外,还有另外两部分成员函数,一部分负责定义当前卷积层与前一层之间的连接关系,另一部分则完成convolutional_layer类的剩余辅助功能,例如返回相关属性、将权重矩阵和输出矩阵转换为图像格式输出等等。

  一、层间连接规划函数

  这部分函数主要负责定义连接矩阵,来设计卷积层与前一层之间的连接关系,主要包含两个函数和一个结构体类型,接下来它们进行一一介绍。

  1.1 connection_table结构体

  connection_table结构体实际上就是层间连接矩阵的基本原型,主要功能就是根据传入的参数来构建指定的连接矩阵。这个结构体提供了两个构造函数。其中一个构造函数算是缺省构造函数,另一个需要外部传入连接矩阵和对应矩阵的行数和列数:

  第一个构造函数没啥可说的,就是默认生成一个空的连接矩阵(rows_ == 0 && cols_ == 0),另一个构造函数则本质上完成一个复制操作,通过标准库中的copy实现将用户自定义的连接矩阵传入connection_table内部:

        connection_table(const bool *ar, size_t rows, size_t cols) : connected_(rows * cols), rows_(rows), cols_(cols) {std::copy(ar, ar + rows * cols, connected_.begin());    //拷贝对应的连接标志位}

  此外connection_table结构体中还用另外两个成员函数is_connected()和is_empty()函数。is_connected()的函数体如下:

        bool is_connected(size_t x, size_t y) const                 {return is_empty() ? true : connected_[y * cols_ + x];   //这里空connection_table默认为全连接}

  is_connected()函数的功能是判断当前坐标(size_t x, size_t y)下的连接情况。举个例子,在主程序中我们人工定义了一个层间连接矩阵:

  这个连接是遵循LeNet-5中第二卷积层与前一层的连接形式,这是一个6行16列矩阵,说明前一层的输出特征矩阵有6个、本层的卷积模板有16个,矩阵中“0”代表连接,“X”代表不连接,接下来举例分析一下这个矩阵的实际意义。比如,矩阵的第1行第2列为“0”,说明前一层的第一个输出特征矩阵和本层的第一个卷积核模板是连接的;再举个例子,矩阵中的第5行第6列为“X”,说明前一层的第5个输出特征矩阵和本层的第6个卷积模板是不连接的,没错,这个连接矩阵就是这个含义。而is_connected()这个函数的作用就是根据前一层和本层的索引来读取连接矩阵中对应的值(true or false)。

  至于is_empty()函数,作用只有一个:判断当前矩阵是否为零阵:

        bool is_empty() const {return rows_ == 0 && cols_ == 0;}

  1.2 connect_kernel函数

  connect_kernel()函数的作用是初始化卷积层的卷积核参数:

  1.3 init_connection函数

  init_connection()是初始化该卷积层的映射参数,包括卷积核权重和偏置,其中初始化卷积核权重是通过调用connect_kernel()函数来实现,初始化加性偏置则直接通过代码实现:

  二、其他函数

  接下来针对convolutional_layer类中的剩余成员函数做一下扫尾工作,主要包含weight_to_image()函数和一些属性返回函数。

  2.1 weight_to_image函数

  这个函数的作用是将该层卷积层中的卷积核权重转换成图像形式进行可视化显示。之所以添加这个函数,是因为在实际实验中经常需要将中间卷积层的卷积核权重进行输出,来判断网络的收敛情况、学习进度,同时借助卷积核来对卷积神经网络的特征提取原理做一些深入性的研究。这个函数大致可以分为两部分,首先需要对图像填充,然后在进行转换,在转换过程中涉及到工程中自定义中的image.h模块,有关image模块会在后续的博文中进行详细讲解。

  2.2 属性返回函数

  convolutional_layer类的最后一个部分,属性返回函数,顾名思义,返回类成员属性:

  三、注意事项

  1、连接矩阵的本质属性

  在这里需要稍稍纠正一个说法问题,在上文中我们一直说“连接矩阵”,其实这里的连接矩阵本质上并不是Mat类型的矩阵,而是存储一系列布尔值的vector变量,具体上图:

  至于connection变量,在connection_table结构体的内部给出了更为直接的定义:

  2、is_connected()函数实现

  is_connected()函数虽然功能很简单,但是其实现起来还是有一点小麻烦,比如说其主要的功能实现部分的代码:

  故名思议,如果矩阵为零阵,返回ture,否则按索引值返回,问题是这里的connected_变量是一个vector而非中规中矩的二维矩阵,因此我们要通过人工定义的列数(cols_)来辅助完成定位(y * cols_ + x)。

  3、“0”代表连接、“X”代表不连接

  这通过一个宏定义来实现:

  4、卷积网路的基本属性

  这篇博文中提到了很多卷积神经网络中的专用术语,例如卷积核权重、加性偏执、全连接等等,有关卷积神经网络的基本原理可以参考之前我上传的一个牛人写的PPT,我当时读完之后,受益良多。



如果觉得这篇文章对您有所启发,欢迎关注我的公众号,我会尽可能积极和大家交流,谢谢。


这篇关于C++卷积神经网络实例:tiny_cnn代码详解(5)——convolutional_layer类结构信息之其他成员函数的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1115498

相关文章

MySQL数据库双机热备的配置方法详解

《MySQL数据库双机热备的配置方法详解》在企业级应用中,数据库的高可用性和数据的安全性是至关重要的,MySQL作为最流行的开源关系型数据库管理系统之一,提供了多种方式来实现高可用性,其中双机热备(M... 目录1. 环境准备1.1 安装mysql1.2 配置MySQL1.2.1 主服务器配置1.2.2 从

C++中unordered_set哈希集合的实现

《C++中unordered_set哈希集合的实现》std::unordered_set是C++标准库中的无序关联容器,基于哈希表实现,具有元素唯一性和无序性特点,本文就来详细的介绍一下unorder... 目录一、概述二、头文件与命名空间三、常用方法与示例1. 构造与析构2. 迭代器与遍历3. 容量相关4

C++中悬垂引用(Dangling Reference) 的实现

《C++中悬垂引用(DanglingReference)的实现》C++中的悬垂引用指引用绑定的对象被销毁后引用仍存在的情况,会导致访问无效内存,下面就来详细的介绍一下产生的原因以及如何避免,感兴趣... 目录悬垂引用的产生原因1. 引用绑定到局部变量,变量超出作用域后销毁2. 引用绑定到动态分配的对象,对象

Linux kill正在执行的后台任务 kill进程组使用详解

《Linuxkill正在执行的后台任务kill进程组使用详解》文章介绍了两个脚本的功能和区别,以及执行这些脚本时遇到的进程管理问题,通过查看进程树、使用`kill`命令和`lsof`命令,分析了子... 目录零. 用到的命令一. 待执行的脚本二. 执行含子进程的脚本,并kill2.1 进程查看2.2 遇到的

MyBatis常用XML语法详解

《MyBatis常用XML语法详解》文章介绍了MyBatis常用XML语法,包括结果映射、查询语句、插入语句、更新语句、删除语句、动态SQL标签以及ehcache.xml文件的使用,感兴趣的朋友跟随小... 目录1、定义结果映射2、查询语句3、插入语句4、更新语句5、删除语句6、动态 SQL 标签7、ehc

详解SpringBoot+Ehcache使用示例

《详解SpringBoot+Ehcache使用示例》本文介绍了SpringBoot中配置Ehcache、自定义get/set方式,并实际使用缓存的过程,文中通过示例代码介绍的非常详细,对大家的学习或者... 目录摘要概念内存与磁盘持久化存储:配置灵活性:编码示例引入依赖:配置ehcache.XML文件:配置

从基础到高级详解Go语言中错误处理的实践指南

《从基础到高级详解Go语言中错误处理的实践指南》Go语言采用了一种独特而明确的错误处理哲学,与其他主流编程语言形成鲜明对比,本文将为大家详细介绍Go语言中错误处理详细方法,希望对大家有所帮助... 目录1 Go 错误处理哲学与核心机制1.1 错误接口设计1.2 错误与异常的区别2 错误创建与检查2.1 基础

k8s按需创建PV和使用PVC详解

《k8s按需创建PV和使用PVC详解》Kubernetes中,PV和PVC用于管理持久存储,StorageClass实现动态PV分配,PVC声明存储需求并绑定PV,通过kubectl验证状态,注意回收... 目录1.按需创建 PV(使用 StorageClass)创建 StorageClass2.创建 PV

Python版本信息获取方法详解与实战

《Python版本信息获取方法详解与实战》在Python开发中,获取Python版本号是调试、兼容性检查和版本控制的重要基础操作,本文详细介绍了如何使用sys和platform模块获取Python的主... 目录1. python版本号获取基础2. 使用sys模块获取版本信息2.1 sys模块概述2.1.1

一文详解Python如何开发游戏

《一文详解Python如何开发游戏》Python是一种非常流行的编程语言,也可以用来开发游戏模组,:本文主要介绍Python如何开发游戏的相关资料,文中通过代码介绍的非常详细,需要的朋友可以参考下... 目录一、python简介二、Python 开发 2D 游戏的优劣势优势缺点三、Python 开发 3D