【Python深度学习】——使用Logging记录模型训练过程

2024-06-20 15:12

本文主要是介绍【Python深度学习】——使用Logging记录模型训练过程,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

【Python深度学习】——使用Logging记录模型训练过程

  • 1. 导入logging库, getLogger()创建日志记录器
  • 2. logger.setLevel()设置log级别
  • 3. FileHandler()设置日志文件路径
  • 4. StreamHandler()将日志输出到控制台
  • 5. 其他性质
  • 6. 代码示例

1. 导入logging库, getLogger()创建日志记录器

import logging
logger = logging.getLogger()

在getLogger()函数中,可以设置日志记录器的名称, 例如:

logger = logging.getLogger(__name__)
## 或者
logger = logging.getLogger('my_logger')

2. logger.setLevel()设置log级别

logger.setLevel(level=logging.DEBUG)
级别示例级别数值
DEBUGlogging.debug10
INFOlogging.info20
WARNINGlogging.warning30
ERRORlogging.error40
CRITICALlogging.critical50

3. FileHandler()设置日志文件路径

file_handler = logging.FileHandler('my_log.log')

4. StreamHandler()将日志输出到控制台

stream_handler = logging.StreamHandler()
logger.addHandler(stream_handler)

5. 其他性质

  • propagate: 是否将日志消息传递给上级日志记录器
logger.propagate = False

6. 代码示例

在Geo Transformer代码中, 对logging库中要使用的一些功能, 封装成了一个Logger类, 详情如下:

import loggingimport coloredlogsdef create_logger(log_file=None):logger = logging.getLogger()logger.handlers.clear()logger.setLevel(level=logging.DEBUG)logger.propagate = Falseformat_str = '[%(asctime)s] [%(levelname).4s] %(message)s'stream_handler = logging.StreamHandler()colored_formatter = coloredlogs.ColoredFormatter(format_str)stream_handler.setFormatter(colored_formatter)logger.addHandler(stream_handler)if log_file is not None:file_handler = logging.FileHandler(log_file)formatter = logging.Formatter(format_str, datefmt='%Y-%m-%d %H:%M:%S')file_handler.setFormatter(formatter)logger.addHandler(file_handler)return loggerclass Logger:def __init__(self, log_file=None, local_rank=-1):if local_rank == 0 or local_rank == -1:self.logger = create_logger(log_file=log_file)else:self.logger = Nonedef debug(self, message):if self.logger is not None:self.logger.debug(message)def info(self, message):if self.logger is not None:self.logger.info(message)def warning(self, message):if self.logger is not None:self.logger.warning(message)def error(self, message):if self.logger is not None:self.logger.error(message)def critical(self, message):if self.logger is not None:self.logger.critical(message)

这篇关于【Python深度学习】——使用Logging记录模型训练过程的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1078485

相关文章

使用animation.css库快速实现CSS3旋转动画效果

《使用animation.css库快速实现CSS3旋转动画效果》随着Web技术的不断发展,动画效果已经成为了网页设计中不可或缺的一部分,本文将深入探讨animation.css的工作原理,如何使用以及... 目录1. css3动画技术简介2. animation.css库介绍2.1 animation.cs

使用雪花算法产生id导致前端精度缺失问题解决方案

《使用雪花算法产生id导致前端精度缺失问题解决方案》雪花算法由Twitter提出,设计目的是生成唯一的、递增的ID,下面:本文主要介绍使用雪花算法产生id导致前端精度缺失问题的解决方案,文中通过代... 目录一、问题根源二、解决方案1. 全局配置Jackson序列化规则2. 实体类必须使用Long封装类3.

Python文件操作与IO流的使用方式

《Python文件操作与IO流的使用方式》:本文主要介绍Python文件操作与IO流的使用方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、python文件操作基础1. 打开文件2. 关闭文件二、文件读写操作1.www.chinasem.cn 读取文件2. 写

PyQt6中QMainWindow组件的使用详解

《PyQt6中QMainWindow组件的使用详解》QMainWindow是PyQt6中用于构建桌面应用程序的基础组件,本文主要介绍了PyQt6中QMainWindow组件的使用,具有一定的参考价值,... 目录1. QMainWindow 组php件概述2. 使用 QMainWindow3. QMainW

使用Python自动化生成PPT并结合LLM生成内容的代码解析

《使用Python自动化生成PPT并结合LLM生成内容的代码解析》PowerPoint是常用的文档工具,但手动设计和排版耗时耗力,本文将展示如何通过Python自动化提取PPT样式并生成新PPT,同时... 目录核心代码解析1. 提取 PPT 样式到 jsON关键步骤:代码片段:2. 应用 JSON 样式到

python通过curl实现访问deepseek的API

《python通过curl实现访问deepseek的API》这篇文章主要为大家详细介绍了python如何通过curl实现访问deepseek的API,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编... API申请和充值下面是deepeek的API网站https://platform.deepsee

java变量内存中存储的使用方式

《java变量内存中存储的使用方式》:本文主要介绍java变量内存中存储的使用方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录1、介绍2、变量的定义3、 变量的类型4、 变量的作用域5、 内存中的存储方式总结1、介绍在 Java 中,变量是用于存储程序中数据

关于Mybatis和JDBC的使用及区别

《关于Mybatis和JDBC的使用及区别》:本文主要介绍关于Mybatis和JDBC的使用及区别,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录1、JDBC1.1、流程1.2、优缺点2、MyBATis2.1、执行流程2.2、使用2.3、实现方式1、XML配置文件

Maven 插件配置分层架构深度解析

《Maven插件配置分层架构深度解析》:本文主要介绍Maven插件配置分层架构深度解析,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧... 目录Maven 插件配置分层架构深度解析引言:当构建逻辑遇上复杂配置第一章 Maven插件配置的三重境界1.1 插件配置的拓扑

macOS Sequoia 15.5 发布: 改进邮件和屏幕使用时间功能

《macOSSequoia15.5发布:改进邮件和屏幕使用时间功能》经过常规Beta测试后,新的macOSSequoia15.5现已公开发布,但重要的新功能将被保留到WWDC和... MACOS Sequoia 15.5 正式发布!本次更新为 Mac 用户带来了一系列功能强化、错误修复和安全性提升,进一步增