深度学习进度显示神器:tqdm详解

2023-10-11 08:04

本文主要是介绍深度学习进度显示神器:tqdm详解,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1 tqdm介绍

tqdm是Python的一个进度条库,可以在 Python长循环中添加一个进度提示信息。用户只需要封装任意的迭代器,是一个快速、扩展性强的进度条工具库。

tqdm的优点如下所述:

  • 易于使用:只需在 Python 循环中包裹你的迭代器,一行代码就能产生一个精美的进度条。
  • 灵活:它可以和 for 循环、pandas dataframe的 apply 函数以及 Python 的 map 函数等等配合使用。
  • 高效:tqdm 使用了智能算法,即使在数据流非常快的情况下,也不会拖慢你的代码速度。

tqdm可以用在网络文件下载、数据预处理任务、深度学习模型训练等方面,将任务处理进度可视化显示。

2 tqdm使用示例

2.1 tqdm直接传入可迭代对象

import time
from tqdm import tqdmfor i in tqdm(range(60)):print('step i:', i)time.sleep(0.01)

运行结果显示如下:(默认情况下,0.1s打印一次进度信息)

  0%|          | 0/60 [00:00<?, ?it/s]step i: 0
step i: 1
step i: 2
step i: 3
step i: 4
step i: 5
step i: 610%|█         | 6/60 [00:00<00:00, 58.99it/s]step i: 7
step i: 8
step i: 9
step i: 10
step i: 11
step i: 1222%|██▏       | 13/60 [00:00<00:00, 61.25it/s]step i: 13
step i: 14
step i: 15
step i: 16
step i: 17
step i: 18
step i: 19
step i: 2033%|███▎      | 20/60 [00:00<00:00, 62.46it/s]step i: 21
step i: 22
step i: 23
step i: 24
step i: 25
step i: 2645%|████▌     | 27/60 [00:00<00:00, 63.34it/s]step i: 27
step i: 28
step i: 29
step i: 30
step i: 31
step i: 32
step i: 3357%|█████▋    | 34/60 [00:00<00:00, 63.18it/s]step i: 34
step i: 35
step i: 36
step i: 37
step i: 38
step i: 39
step i: 40
step i: 4168%|██████▊   | 41/60 [00:00<00:00, 63.71it/s]step i: 42
step i: 43
step i: 44
step i: 45
step i: 46
step i: 47
step i: 4880%|████████  | 48/60 [00:00<00:00, 63.53it/s]step i: 49
step i: 50
step i: 51
step i: 52
step i: 53
step i: 5492%|█████████▏| 55/60 [00:00<00:00, 63.35it/s]step i: 55
step i: 56
step i: 57
step i: 58
step i: 59
100%|██████████| 60/60 [00:00<00:00, 63.08it/s]

2.2 使用trange(i)

相当于tqdm(range(i))的简单写法

from tqdm import trange
import timefor t in trange(60):print('step i:', t)time.sleep(0.01)

运行结果显示如下:

  0%|          | 0/60 [00:00<?, ?it/s]step i: 0
step i: 1
step i: 2
step i: 3
step i: 4
step i: 5
step i: 610%|█         | 6/60 [00:00<00:00, 57.70it/s]step i: 7
step i: 8
step i: 9
step i: 10
step i: 11
step i: 12
step i: 1322%|██▏       | 13/60 [00:00<00:00, 61.68it/s]step i: 14
step i: 15
step i: 16
step i: 17
step i: 18
step i: 19
step i: 2033%|███▎      | 20/60 [00:00<00:00, 62.57it/s]step i: 21
step i: 22
step i: 23
step i: 24
step i: 25
step i: 26
step i: 2745%|████▌     | 27/60 [00:00<00:00, 63.50it/s]step i: 28
step i: 29
step i: 30
step i: 31
step i: 32
step i: 33
step i: 3457%|█████▋    | 34/60 [00:00<00:00, 63.57it/s]step i: 35
step i: 36
step i: 37
step i: 38
step i: 39
step i: 40
step i: 4168%|██████▊   | 41/60 [00:00<00:00, 63.65it/s]step i: 42
step i: 43
step i: 44
step i: 45
step i: 46
step i: 4780%|████████  | 48/60 [00:00<00:00, 63.89it/s]step i: 48
step i: 49
step i: 50
step i: 51
step i: 52
step i: 53
step i: 5492%|█████████▏| 55/60 [00:00<00:00, 63.78it/s]step i: 55
step i: 56
step i: 57
step i: 58
step i: 59
100%|██████████| 60/60 [00:00<00:00, 63.41it/s]

2.3 使用update手动控制进度条更新的进度

from tqdm import tqdm
import timepbar = tqdm(total=100)
for i in range(10):  # 总共更新 10 次print('step i:', i)pbar.update(10)  # 每次更新步长为 10time.sleep(1)

运行结果显示如下:

step i: 020%|██        | 20/100 [00:01<00:04, 19.93it/s]step i: 130%|███       | 30/100 [00:02<00:04, 14.03it/s]step i: 2
step i: 350%|█████     | 50/100 [00:04<00:04, 11.26it/s]step i: 460%|██████    | 60/100 [00:05<00:03, 10.77it/s]step i: 5
step i: 680%|████████  | 80/100 [00:07<00:01, 10.29it/s]step i: 7
step i: 8
100%|██████████| 100/100 [00:09<00:00, 10.09it/s]step i: 9
100%|██████████| 100/100 [00:10<00:00,  9.91it/s]

2.4 使用write更新进度信息

from tqdm import trange, tqdm
import timepbar = trange(10)
for i in pbar:time.sleep(1)if not (i % 2):tqdm.write('finish task %i' % i)

运行代码显示如下:

 10%|█         | 1/10 [00:01<00:09,  1.01s/it]finish task 030%|███       | 3/10 [00:03<00:07,  1.01s/it]finish task 250%|█████     | 5/10 [00:05<00:05,  1.01s/it]finish task 470%|███████   | 7/10 [00:07<00:03,  1.01s/it]finish task 690%|█████████ | 9/10 [00:09<00:01,  1.01s/it]finish task 8
100%|██████████| 10/10 [00:10<00:00,  1.01s/it]

2.5 通过set_descriptionset_postfix设置进度条显示信息

from random import random, randint
from tqdm import trange
import timewith trange(10) as t:for i in t:print('step i:', i)t.set_description("GEN %i" % i)  # 进度条左边显示信息t.set_postfix(loss=random(), gen=randint(1, 999), str="h", lst=[1, 2])  # 进度条右边显示信息time.sleep(0.1)

运行代码显示如下:

GEN 0:   0%|          | 0/10 [00:00<?, ?it/s, gen=853, loss=0.984, lst=[1, 2], str=h]step i: 0
step i: 1
GEN 2:  20%|██        | 2/10 [00:00<00:00,  8.97it/s, gen=542, loss=0.782, lst=[1, 2], str=h]step i: 2
GEN 3:  30%|███       | 3/10 [00:00<00:00,  9.11it/s, gen=399, loss=0.923, lst=[1, 2], str=h]step i: 3
step i: 4
GEN 5:  50%|█████     | 5/10 [00:00<00:00,  9.09it/s, gen=460, loss=0.824, lst=[1, 2], str=h]step i: 5
GEN 6:  60%|██████    | 6/10 [00:00<00:00,  9.11it/s, gen=657, loss=0.657, lst=[1, 2], str=h]step i: 6
GEN 7:  70%|███████   | 7/10 [00:00<00:00,  9.14it/s, gen=340, loss=0.791, lst=[1, 2], str=h]step i: 7
step i: 8
GEN 9:  90%|█████████ | 9/10 [00:00<00:00,  9.13it/s, gen=104, loss=0.578, lst=[1, 2], str=h]step i: 9
GEN 9: 100%|██████████| 10/10 [00:01<00:00,  9.13it/s, gen=104, loss=0.578, lst=[1, 2], str=h]

这篇关于深度学习进度显示神器:tqdm详解的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/186688

相关文章

Mysql数据库聚簇索引与非聚簇索引举例详解

《Mysql数据库聚簇索引与非聚簇索引举例详解》在MySQL中聚簇索引和非聚簇索引是两种常见的索引结构,它们的主要区别在于数据的存储方式和索引的组织方式,:本文主要介绍Mysql数据库聚簇索引与非... 目录前言一、核心概念与本质区别二、聚簇索引(Clustered Index)1. 实现原理(以 Inno

使用python生成固定格式序号的方法详解

《使用python生成固定格式序号的方法详解》这篇文章主要为大家详细介绍了如何使用python生成固定格式序号,文中的示例代码讲解详细,具有一定的借鉴价值,有需要的小伙伴可以参考一下... 目录生成结果验证完整生成代码扩展说明1. 保存到文本文件2. 转换为jsON格式3. 处理特殊序号格式(如带圈数字)4

MySQL数据库双机热备的配置方法详解

《MySQL数据库双机热备的配置方法详解》在企业级应用中,数据库的高可用性和数据的安全性是至关重要的,MySQL作为最流行的开源关系型数据库管理系统之一,提供了多种方式来实现高可用性,其中双机热备(M... 目录1. 环境准备1.1 安装mysql1.2 配置MySQL1.2.1 主服务器配置1.2.2 从

Java中Redisson 的原理深度解析

《Java中Redisson的原理深度解析》Redisson是一个高性能的Redis客户端,它通过将Redis数据结构映射为Java对象和分布式对象,实现了在Java应用中方便地使用Redis,本文... 目录前言一、核心设计理念二、核心架构与通信层1. 基于 Netty 的异步非阻塞通信2. 编解码器三、

Linux kill正在执行的后台任务 kill进程组使用详解

《Linuxkill正在执行的后台任务kill进程组使用详解》文章介绍了两个脚本的功能和区别,以及执行这些脚本时遇到的进程管理问题,通过查看进程树、使用`kill`命令和`lsof`命令,分析了子... 目录零. 用到的命令一. 待执行的脚本二. 执行含子进程的脚本,并kill2.1 进程查看2.2 遇到的

MyBatis常用XML语法详解

《MyBatis常用XML语法详解》文章介绍了MyBatis常用XML语法,包括结果映射、查询语句、插入语句、更新语句、删除语句、动态SQL标签以及ehcache.xml文件的使用,感兴趣的朋友跟随小... 目录1、定义结果映射2、查询语句3、插入语句4、更新语句5、删除语句6、动态 SQL 标签7、ehc

Java HashMap的底层实现原理深度解析

《JavaHashMap的底层实现原理深度解析》HashMap基于数组+链表+红黑树结构,通过哈希算法和扩容机制优化性能,负载因子与树化阈值平衡效率,是Java开发必备的高效数据结构,本文给大家介绍... 目录一、概述:HashMap的宏观结构二、核心数据结构解析1. 数组(桶数组)2. 链表节点(Node

详解SpringBoot+Ehcache使用示例

《详解SpringBoot+Ehcache使用示例》本文介绍了SpringBoot中配置Ehcache、自定义get/set方式,并实际使用缓存的过程,文中通过示例代码介绍的非常详细,对大家的学习或者... 目录摘要概念内存与磁盘持久化存储:配置灵活性:编码示例引入依赖:配置ehcache.XML文件:配置

Java 虚拟线程的创建与使用深度解析

《Java虚拟线程的创建与使用深度解析》虚拟线程是Java19中以预览特性形式引入,Java21起正式发布的轻量级线程,本文给大家介绍Java虚拟线程的创建与使用,感兴趣的朋友一起看看吧... 目录一、虚拟线程简介1.1 什么是虚拟线程?1.2 为什么需要虚拟线程?二、虚拟线程与平台线程对比代码对比示例:三

从基础到高级详解Go语言中错误处理的实践指南

《从基础到高级详解Go语言中错误处理的实践指南》Go语言采用了一种独特而明确的错误处理哲学,与其他主流编程语言形成鲜明对比,本文将为大家详细介绍Go语言中错误处理详细方法,希望对大家有所帮助... 目录1 Go 错误处理哲学与核心机制1.1 错误接口设计1.2 错误与异常的区别2 错误创建与检查2.1 基础