深度学习进度显示神器:tqdm详解

2023-10-11 08:04

本文主要是介绍深度学习进度显示神器:tqdm详解,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1 tqdm介绍

tqdm是Python的一个进度条库,可以在 Python长循环中添加一个进度提示信息。用户只需要封装任意的迭代器,是一个快速、扩展性强的进度条工具库。

tqdm的优点如下所述:

  • 易于使用:只需在 Python 循环中包裹你的迭代器,一行代码就能产生一个精美的进度条。
  • 灵活:它可以和 for 循环、pandas dataframe的 apply 函数以及 Python 的 map 函数等等配合使用。
  • 高效:tqdm 使用了智能算法,即使在数据流非常快的情况下,也不会拖慢你的代码速度。

tqdm可以用在网络文件下载、数据预处理任务、深度学习模型训练等方面,将任务处理进度可视化显示。

2 tqdm使用示例

2.1 tqdm直接传入可迭代对象

import time
from tqdm import tqdmfor i in tqdm(range(60)):print('step i:', i)time.sleep(0.01)

运行结果显示如下:(默认情况下,0.1s打印一次进度信息)

  0%|          | 0/60 [00:00<?, ?it/s]step i: 0
step i: 1
step i: 2
step i: 3
step i: 4
step i: 5
step i: 610%|█         | 6/60 [00:00<00:00, 58.99it/s]step i: 7
step i: 8
step i: 9
step i: 10
step i: 11
step i: 1222%|██▏       | 13/60 [00:00<00:00, 61.25it/s]step i: 13
step i: 14
step i: 15
step i: 16
step i: 17
step i: 18
step i: 19
step i: 2033%|███▎      | 20/60 [00:00<00:00, 62.46it/s]step i: 21
step i: 22
step i: 23
step i: 24
step i: 25
step i: 2645%|████▌     | 27/60 [00:00<00:00, 63.34it/s]step i: 27
step i: 28
step i: 29
step i: 30
step i: 31
step i: 32
step i: 3357%|█████▋    | 34/60 [00:00<00:00, 63.18it/s]step i: 34
step i: 35
step i: 36
step i: 37
step i: 38
step i: 39
step i: 40
step i: 4168%|██████▊   | 41/60 [00:00<00:00, 63.71it/s]step i: 42
step i: 43
step i: 44
step i: 45
step i: 46
step i: 47
step i: 4880%|████████  | 48/60 [00:00<00:00, 63.53it/s]step i: 49
step i: 50
step i: 51
step i: 52
step i: 53
step i: 5492%|█████████▏| 55/60 [00:00<00:00, 63.35it/s]step i: 55
step i: 56
step i: 57
step i: 58
step i: 59
100%|██████████| 60/60 [00:00<00:00, 63.08it/s]

2.2 使用trange(i)

相当于tqdm(range(i))的简单写法

from tqdm import trange
import timefor t in trange(60):print('step i:', t)time.sleep(0.01)

运行结果显示如下:

  0%|          | 0/60 [00:00<?, ?it/s]step i: 0
step i: 1
step i: 2
step i: 3
step i: 4
step i: 5
step i: 610%|█         | 6/60 [00:00<00:00, 57.70it/s]step i: 7
step i: 8
step i: 9
step i: 10
step i: 11
step i: 12
step i: 1322%|██▏       | 13/60 [00:00<00:00, 61.68it/s]step i: 14
step i: 15
step i: 16
step i: 17
step i: 18
step i: 19
step i: 2033%|███▎      | 20/60 [00:00<00:00, 62.57it/s]step i: 21
step i: 22
step i: 23
step i: 24
step i: 25
step i: 26
step i: 2745%|████▌     | 27/60 [00:00<00:00, 63.50it/s]step i: 28
step i: 29
step i: 30
step i: 31
step i: 32
step i: 33
step i: 3457%|█████▋    | 34/60 [00:00<00:00, 63.57it/s]step i: 35
step i: 36
step i: 37
step i: 38
step i: 39
step i: 40
step i: 4168%|██████▊   | 41/60 [00:00<00:00, 63.65it/s]step i: 42
step i: 43
step i: 44
step i: 45
step i: 46
step i: 4780%|████████  | 48/60 [00:00<00:00, 63.89it/s]step i: 48
step i: 49
step i: 50
step i: 51
step i: 52
step i: 53
step i: 5492%|█████████▏| 55/60 [00:00<00:00, 63.78it/s]step i: 55
step i: 56
step i: 57
step i: 58
step i: 59
100%|██████████| 60/60 [00:00<00:00, 63.41it/s]

2.3 使用update手动控制进度条更新的进度

from tqdm import tqdm
import timepbar = tqdm(total=100)
for i in range(10):  # 总共更新 10 次print('step i:', i)pbar.update(10)  # 每次更新步长为 10time.sleep(1)

运行结果显示如下:

step i: 020%|██        | 20/100 [00:01<00:04, 19.93it/s]step i: 130%|███       | 30/100 [00:02<00:04, 14.03it/s]step i: 2
step i: 350%|█████     | 50/100 [00:04<00:04, 11.26it/s]step i: 460%|██████    | 60/100 [00:05<00:03, 10.77it/s]step i: 5
step i: 680%|████████  | 80/100 [00:07<00:01, 10.29it/s]step i: 7
step i: 8
100%|██████████| 100/100 [00:09<00:00, 10.09it/s]step i: 9
100%|██████████| 100/100 [00:10<00:00,  9.91it/s]

2.4 使用write更新进度信息

from tqdm import trange, tqdm
import timepbar = trange(10)
for i in pbar:time.sleep(1)if not (i % 2):tqdm.write('finish task %i' % i)

运行代码显示如下:

 10%|█         | 1/10 [00:01<00:09,  1.01s/it]finish task 030%|███       | 3/10 [00:03<00:07,  1.01s/it]finish task 250%|█████     | 5/10 [00:05<00:05,  1.01s/it]finish task 470%|███████   | 7/10 [00:07<00:03,  1.01s/it]finish task 690%|█████████ | 9/10 [00:09<00:01,  1.01s/it]finish task 8
100%|██████████| 10/10 [00:10<00:00,  1.01s/it]

2.5 通过set_descriptionset_postfix设置进度条显示信息

from random import random, randint
from tqdm import trange
import timewith trange(10) as t:for i in t:print('step i:', i)t.set_description("GEN %i" % i)  # 进度条左边显示信息t.set_postfix(loss=random(), gen=randint(1, 999), str="h", lst=[1, 2])  # 进度条右边显示信息time.sleep(0.1)

运行代码显示如下:

GEN 0:   0%|          | 0/10 [00:00<?, ?it/s, gen=853, loss=0.984, lst=[1, 2], str=h]step i: 0
step i: 1
GEN 2:  20%|██        | 2/10 [00:00<00:00,  8.97it/s, gen=542, loss=0.782, lst=[1, 2], str=h]step i: 2
GEN 3:  30%|███       | 3/10 [00:00<00:00,  9.11it/s, gen=399, loss=0.923, lst=[1, 2], str=h]step i: 3
step i: 4
GEN 5:  50%|█████     | 5/10 [00:00<00:00,  9.09it/s, gen=460, loss=0.824, lst=[1, 2], str=h]step i: 5
GEN 6:  60%|██████    | 6/10 [00:00<00:00,  9.11it/s, gen=657, loss=0.657, lst=[1, 2], str=h]step i: 6
GEN 7:  70%|███████   | 7/10 [00:00<00:00,  9.14it/s, gen=340, loss=0.791, lst=[1, 2], str=h]step i: 7
step i: 8
GEN 9:  90%|█████████ | 9/10 [00:00<00:00,  9.13it/s, gen=104, loss=0.578, lst=[1, 2], str=h]step i: 9
GEN 9: 100%|██████████| 10/10 [00:01<00:00,  9.13it/s, gen=104, loss=0.578, lst=[1, 2], str=h]

这篇关于深度学习进度显示神器:tqdm详解的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/186688

相关文章

Python使用Tenacity一行代码实现自动重试详解

《Python使用Tenacity一行代码实现自动重试详解》tenacity是一个专为Python设计的通用重试库,它的核心理念就是用简单、清晰的方式,为任何可能失败的操作添加重试能力,下面我们就来看... 目录一切始于一个简单的 API 调用Tenacity 入门:一行代码实现优雅重试精细控制:让重试按我

深度解析Spring Security 中的 SecurityFilterChain核心功能

《深度解析SpringSecurity中的SecurityFilterChain核心功能》SecurityFilterChain通过组件化配置、类型安全路径匹配、多链协同三大特性,重构了Spri... 目录Spring Security 中的SecurityFilterChain深度解析一、Security

Python标准库之数据压缩和存档的应用详解

《Python标准库之数据压缩和存档的应用详解》在数据处理与存储领域,压缩和存档是提升效率的关键技术,Python标准库提供了一套完整的工具链,下面小编就来和大家简单介绍一下吧... 目录一、核心模块架构与设计哲学二、关键模块深度解析1.tarfile:专业级归档工具2.zipfile:跨平台归档首选3.

idea的终端(Terminal)cmd的命令换成linux的命令详解

《idea的终端(Terminal)cmd的命令换成linux的命令详解》本文介绍IDEA配置Git的步骤:安装Git、修改终端设置并重启IDEA,强调顺序,作为个人经验分享,希望提供参考并支持脚本之... 目录一编程、设置前二、前置条件三、android设置四、设置后总结一、php设置前二、前置条件

python中列表应用和扩展性实用详解

《python中列表应用和扩展性实用详解》文章介绍了Python列表的核心特性:有序数据集合,用[]定义,元素类型可不同,支持迭代、循环、切片,可执行增删改查、排序、推导式及嵌套操作,是常用的数据处理... 目录1、列表定义2、格式3、列表是可迭代对象4、列表的常见操作总结1、列表定义是处理一组有序项目的

python使用try函数详解

《python使用try函数详解》Pythontry语句用于异常处理,支持捕获特定/多种异常、else/final子句确保资源释放,结合with语句自动清理,可自定义异常及嵌套结构,灵活应对错误场景... 目录try 函数的基本语法捕获特定异常捕获多个异常使用 else 子句使用 finally 子句捕获所

C++11范围for初始化列表auto decltype详解

《C++11范围for初始化列表autodecltype详解》C++11引入auto类型推导、decltype类型推断、统一列表初始化、范围for循环及智能指针,提升代码简洁性、类型安全与资源管理效... 目录C++11新特性1. 自动类型推导auto1.1 基本语法2. decltype3. 列表初始化3

深度解析Nginx日志分析与499状态码问题解决

《深度解析Nginx日志分析与499状态码问题解决》在Web服务器运维和性能优化过程中,Nginx日志是排查问题的重要依据,本文将围绕Nginx日志分析、499状态码的成因、排查方法及解决方案展开讨论... 目录前言1. Nginx日志基础1.1 Nginx日志存放位置1.2 Nginx日志格式2. 499

SQL Server 中的 WITH (NOLOCK) 示例详解

《SQLServer中的WITH(NOLOCK)示例详解》SQLServer中的WITH(NOLOCK)是一种表提示,等同于READUNCOMMITTED隔离级别,允许查询在不获取共享锁的情... 目录SQL Server 中的 WITH (NOLOCK) 详解一、WITH (NOLOCK) 的本质二、工作

springboot自定义注解RateLimiter限流注解技术文档详解

《springboot自定义注解RateLimiter限流注解技术文档详解》文章介绍了限流技术的概念、作用及实现方式,通过SpringAOP拦截方法、缓存存储计数器,结合注解、枚举、异常类等核心组件,... 目录什么是限流系统架构核心组件详解1. 限流注解 (@RateLimiter)2. 限流类型枚举 (