复现LLP-GAN代码(使用CIFAR-10数据集)

2024-01-29 14:58

本文主要是介绍复现LLP-GAN代码(使用CIFAR-10数据集),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

代码地址

LLP-GAN

CIFAR-10数据集

CIFAR-10数据集

环境准备

python3.6
tensorflow1.14
keras
2.2.5
其他的不用指定版本

数据集改为本地文件

环境准备好了以后,可以直接运行good-llp-gan.py,这里代码会去下载CIFAR-10数据集,会很慢,我们可以先下来来,然后本地直接加载。

下载好cifar-10-python.tar.gz,解压,放在dataset文件夹下。

load_local_cifar10.py

from __future__ import absolute_import
from __future__ import division
from __future__ import print_functionfrom tensorflow.keras import backend as K
import numpy as np
import osimport sys
from six.moves import cPickledef load_batch(fpath, label_key='labels'):"""Internal utility for parsing CIFAR data.# Argumentsfpath: path the file to parse.label_key: key for label data in the retrievedictionary.# ReturnsA tuple `(data, labels)`."""with open(fpath, 'rb') as f:if sys.version_info < (3,):d = cPickle.load(f)else:d = cPickle.load(f, encoding='bytes')# decode utf8d_decoded = {}for k, v in d.items():d_decoded[k.decode('utf8')] = vd = d_decodeddata = d['data']labels = d[label_key]data = data.reshape(data.shape[0], 3, 32, 32)return data, labelsdef load_data(ROOT):"""Loads CIFAR10 dataset.# ReturnsTuple of Numpy arrays: `(x_train, y_train), (x_test, y_test)`."""# dirname = 'cifar-10-batches-py'# origin = 'https://www.cs.toronto.edu/~kriz/cifar-10-python.tar.gz'# path = get_file(dirname, origin=origin, untar=True)path = ROOTnum_train_samples = 50000x_train = np.empty((num_train_samples, 3, 32, 32), dtype='uint8')y_train = np.empty((num_train_samples,), dtype='uint8')for i in range(1, 6):fpath = os.path.join(path, 'data_batch_' + str(i))(x_train[(i - 1) * 10000: i * 10000, :, :, :],y_train[(i - 1) * 10000: i * 10000]) = load_batch(fpath)fpath = os.path.join(path, 'test_batch')x_test, y_test = load_batch(fpath)y_train = np.reshape(y_train, (len(y_train), 1))y_test = np.reshape(y_test, (len(y_test), 1))if K.image_data_format() == 'channels_last':x_train = x_train.transpose(0, 2, 3, 1)x_test = x_test.transpose(0, 2, 3, 1)return (x_train, y_train), (x_test, y_test)

然后修改utils.py中的load_data()函数

def load_data():if hp.target_dataset == "CIFAR-10":if os.path.exists(hp.DATASET_DIR + hp.target_dataset):print("load data from pickle")with open(hp.DATASET_DIR + hp.target_dataset + "/train_X.pkl", 'rb') as f:train_X = pickle.load(f)with open(hp.DATASET_DIR + hp.target_dataset + "/train_y.pkl", 'rb') as f:train_y = pickle.load(f)with open(hp.DATASET_DIR + hp.target_dataset + "/valid_X.pkl", 'rb') as f:valid_X = pickle.load(f)with open(hp.DATASET_DIR + hp.target_dataset + "/valid_y.pkl", 'rb') as f:valid_y = pickle.load(f)with open(hp.DATASET_DIR + hp.target_dataset + "/test_X.pkl", 'rb') as f:test_X = pickle.load(f)with open(hp.DATASET_DIR + hp.target_dataset + "/test_y.pkl", 'rb') as f:test_y = pickle.load(f)else:# (cifar_X_1, cifar_y_1), (cifar_X_2, cifar_y_2) = cifar10.load_data() (cifar_X_1, cifar_y_1), (cifar_X_2, cifar_y_2) = load_local_cifar10.load_data('dataset/cifar-10-batches-py')cifar_X = np.r_[cifar_X_1, cifar_X_2]cifar_y = np.r_[cifar_y_1, cifar_y_2]cifar_X = cifar_X.astype('float32') / 255.0cifar_y = np.eye(10)[cifar_y.astype('int32').flatten()]train_X, test_X, train_y, test_y = train_test_split(cifar_X, cifar_y, test_size=5000,random_state=hp.RANDOM_STATE)train_X, valid_X, train_y, valid_y = train_test_split(train_X, train_y, test_size=5000,random_state=hp.RANDOM_STATE)os.mkdir(hp.DATASET_DIR + hp.target_dataset)with open(hp.DATASET_DIR + hp.target_dataset + "/train_X.pkl", 'wb') as f1:pickle.dump(train_X, f1)with open(hp.DATASET_DIR + hp.target_dataset + "/train_y.pkl", 'wb') as f1:pickle.dump(train_y, f1)with open(hp.DATASET_DIR + hp.target_dataset + "/valid_X.pkl", 'wb') as f1:pickle.dump(valid_X, f1)with open(hp.DATASET_DIR + hp.target_dataset + "/valid_y.pkl", 'wb') as f1:pickle.dump(valid_y, f1)with open(hp.DATASET_DIR + hp.target_dataset + "/test_X.pkl", 'wb') as f1:pickle.dump(test_X, f1)with open(hp.DATASET_DIR + hp.target_dataset + "/test_y.pkl", 'wb') as f1:pickle.dump(test_y, f1)return train_X, train_y, valid_X, valid_y, test_X, test_y

修改good-llp-gan.py

# 注掉
# trainx, trainy, validx, validy, testx, testy  = utils.load_data()cifar10_dir = 'dataset/cifar-10-batches-py'
trainx, trainy, validx, validy, testx, testy = utils.load_data()

然后运行,也可以使用gpu加速,只要加入这两行(tensorflow1.0)

import keras.backend.tensorflow_backend as KTFKTF.set_session(tf.Session(config=tf.ConfigProto(device_count={'gpu': 0})))

这篇关于复现LLP-GAN代码(使用CIFAR-10数据集)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/657278

相关文章

Python使用Tenacity一行代码实现自动重试详解

《Python使用Tenacity一行代码实现自动重试详解》tenacity是一个专为Python设计的通用重试库,它的核心理念就是用简单、清晰的方式,为任何可能失败的操作添加重试能力,下面我们就来看... 目录一切始于一个简单的 API 调用Tenacity 入门:一行代码实现优雅重试精细控制:让重试按我

MySQL中EXISTS与IN用法使用与对比分析

《MySQL中EXISTS与IN用法使用与对比分析》在MySQL中,EXISTS和IN都用于子查询中根据另一个查询的结果来过滤主查询的记录,本文将基于工作原理、效率和应用场景进行全面对比... 目录一、基本用法详解1. IN 运算符2. EXISTS 运算符二、EXISTS 与 IN 的选择策略三、性能对比

SpringBoot多环境配置数据读取方式

《SpringBoot多环境配置数据读取方式》SpringBoot通过环境隔离机制,支持properties/yaml/yml多格式配置,结合@Value、Environment和@Configura... 目录一、多环境配置的核心思路二、3种配置文件格式详解2.1 properties格式(传统格式)1.

使用Python构建智能BAT文件生成器的完美解决方案

《使用Python构建智能BAT文件生成器的完美解决方案》这篇文章主要为大家详细介绍了如何使用wxPython构建一个智能的BAT文件生成器,它不仅能够为Python脚本生成启动脚本,还提供了完整的文... 目录引言运行效果图项目背景与需求分析核心需求技术选型核心功能实现1. 数据库设计2. 界面布局设计3

使用IDEA部署Docker应用指南分享

《使用IDEA部署Docker应用指南分享》本文介绍了使用IDEA部署Docker应用的四步流程:创建Dockerfile、配置IDEADocker连接、设置运行调试环境、构建运行镜像,并强调需准备本... 目录一、创建 dockerfile 配置文件二、配置 IDEA 的 Docker 连接三、配置 Do

解决pandas无法读取csv文件数据的问题

《解决pandas无法读取csv文件数据的问题》本文讲述作者用Pandas读取CSV文件时因参数设置不当导致数据错位,通过调整delimiter和on_bad_lines参数最终解决问题,并强调正确参... 目录一、前言二、问题复现1. 问题2. 通过 on_bad_lines=‘warn’ 跳过异常数据3

Android Paging 分页加载库使用实践

《AndroidPaging分页加载库使用实践》AndroidPaging库是Jetpack组件的一部分,它提供了一套完整的解决方案来处理大型数据集的分页加载,本文将深入探讨Paging库... 目录前言一、Paging 库概述二、Paging 3 核心组件1. PagingSource2. Pager3.

python使用try函数详解

《python使用try函数详解》Pythontry语句用于异常处理,支持捕获特定/多种异常、else/final子句确保资源释放,结合with语句自动清理,可自定义异常及嵌套结构,灵活应对错误场景... 目录try 函数的基本语法捕获特定异常捕获多个异常使用 else 子句使用 finally 子句捕获所

C++11右值引用与Lambda表达式的使用

《C++11右值引用与Lambda表达式的使用》C++11引入右值引用,实现移动语义提升性能,支持资源转移与完美转发;同时引入Lambda表达式,简化匿名函数定义,通过捕获列表和参数列表灵活处理变量... 目录C++11新特性右值引用和移动语义左值 / 右值常见的左值和右值移动语义移动构造函数移动复制运算符

Python对接支付宝支付之使用AliPay实现的详细操作指南

《Python对接支付宝支付之使用AliPay实现的详细操作指南》支付宝没有提供PythonSDK,但是强大的github就有提供python-alipay-sdk,封装里很多复杂操作,使用这个我们就... 目录一、引言二、准备工作2.1 支付宝开放平台入驻与应用创建2.2 密钥生成与配置2.3 安装ali