运维入门- python实现对.log日志文件的无用行内容过滤,便于留存有价值的信息

本文主要是介绍运维入门- python实现对.log日志文件的无用行内容过滤,便于留存有价值的信息,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

代码原文:

def remove_offline_messages(file_path):try:# 打开文件并读取所有行with open(file_path, 'r', encoding='utf-8') as file:lines = file.readlines()# 过滤掉包含'pc消息离线pcadmin'的行filtered_lines = [line for line in lines if '丢弃消息======' not in line]# 将过滤后的内容写回文件with open(file_path, 'w', encoding='utf-8') as file:file.writelines(filtered_lines)print("文件处理完成,相关行已删除。")except Exception as e:print(f"处理文件时出错: {e}")# 使用方法
file_path = 'ws_business.log'
remove_offline_messages(file_path)

这段 Python 代码定义了一个函数 remove_offline_messages,用于从指定文件中删除包含特定字符串的行,并将处理后的内容写回文件。下面是对这段代码的详细解释:

函数定义

def remove_offline_messages(file_path):
  • def:定义一个函数。
  • remove_offline_messages:函数名,表示删除离线消息。
  • file_path:函数参数,表示要处理的文件路径。

尝试读取文件并处理

try:
  • try:开始一个异常处理块,用于捕获和处理可能出现的异常。
打开文件并读取所有行
# 打开文件并读取所有行
with open(file_path, 'r', encoding='utf-8') as file:lines = file.readlines()
  • with open(file_path, 'r', encoding='utf-8') as file:使用 with 语句以只读模式 ('r') 打开文件,编码方式为 utf-8with 语句会在 file 对象退出上下文时自动关闭文件。
  • file.readlines():读取文件中的所有行,并将它们存储在 lines 列表中,每一行作为列表的一个元素。
过滤掉不需要的行
# 过滤掉包含'丢弃消息======'的行
filtered_lines = [line for line in lines if '丢弃消息======' not in line]
  • 列表推导式 filtered_lines = [line for line in lines if '丢弃消息======' not in line]:遍历 lines 列表,将不包含字符串 '丢弃消息======' 的行保留,形成新的列表 filtered_lines
将过滤后的内容写回文件
# 将过滤后的内容写回文件
with open(file_path, 'w', encoding='utf-8') as file:file.writelines(filtered_lines)
  • with open(file_path, 'w', encoding='utf-8') as file:使用 with 语句以写入模式 ('w') 打开文件,编码方式为 utf-8。此时文件内容会被清空。
  • file.writelines(filtered_lines):将 filtered_lines 列表中的每一行写入文件。

打印处理完成信息

print("文件处理完成,相关行已删除。")
  • print:输出提示信息,表示文件处理已完成,并且相关行已被删除。

异常处理

except Exception as e:print(f"处理文件时出错: {e}")
  • except Exception as e:捕获所有异常,并将异常实例赋值给 e
  • print(f"处理文件时出错: {e}"):输出异常信息,提示处理文件时出现了错误,并显示具体的异常内容。

函数调用

# 使用方法
file_path = 'ws_business.log'
remove_offline_messages(file_path)
  • file_path = 'ws_business.log':定义文件路径变量,指向要处理的日志文件。
  • remove_offline_messages(file_path):调用 remove_offline_messages 函数,传入文件路径,执行文件内容的过滤和写入操作。

代码的功能和目的

  • 功能:从指定文件中删除包含特定字符串(‘丢弃消息======’)的行,并将处理后的文件内容写回原文件。
  • 目的:清理日志文件或其他文本文件,移除不需要的或不相关的信息,保持文件内容的整洁。

应用场景

  • 清理日志文件,移除不必要的消息,减少文件体积。
  • 过滤数据文件,删除包含特定关键词的行。

文章介绍由chatgpt协助整理

这篇关于运维入门- python实现对.log日志文件的无用行内容过滤,便于留存有价值的信息的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1047436

相关文章

Python中你不知道的gzip高级用法分享

《Python中你不知道的gzip高级用法分享》在当今大数据时代,数据存储和传输成本已成为每个开发者必须考虑的问题,Python内置的gzip模块提供了一种简单高效的解决方案,下面小编就来和大家详细讲... 目录前言:为什么数据压缩如此重要1. gzip 模块基础介绍2. 基本压缩与解压缩操作2.1 压缩文

Python设置Cookie永不超时的详细指南

《Python设置Cookie永不超时的详细指南》Cookie是一种存储在用户浏览器中的小型数据片段,用于记录用户的登录状态、偏好设置等信息,下面小编就来和大家详细讲讲Python如何设置Cookie... 目录一、Cookie的作用与重要性二、Cookie过期的原因三、实现Cookie永不超时的方法(一)

MySQL中查找重复值的实现

《MySQL中查找重复值的实现》查找重复值是一项常见需求,比如在数据清理、数据分析、数据质量检查等场景下,我们常常需要找出表中某列或多列的重复值,具有一定的参考价值,感兴趣的可以了解一下... 目录技术背景实现步骤方法一:使用GROUP BY和HAVING子句方法二:仅返回重复值方法三:返回完整记录方法四:

Python内置函数之classmethod函数使用详解

《Python内置函数之classmethod函数使用详解》:本文主要介绍Python内置函数之classmethod函数使用方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地... 目录1. 类方法定义与基本语法2. 类方法 vs 实例方法 vs 静态方法3. 核心特性与用法(1编程客

IDEA中新建/切换Git分支的实现步骤

《IDEA中新建/切换Git分支的实现步骤》本文主要介绍了IDEA中新建/切换Git分支的实现步骤,通过菜单创建新分支并选择是否切换,创建后在Git详情或右键Checkout中切换分支,感兴趣的可以了... 前提:项目已被Git托管1、点击上方栏Git->NewBrancjsh...2、输入新的分支的

从入门到精通MySQL联合查询

《从入门到精通MySQL联合查询》:本文主要介绍从入门到精通MySQL联合查询,本文通过实例代码给大家介绍的非常详细,需要的朋友可以参考下... 目录摘要1. 多表联合查询时mysql内部原理2. 内连接3. 外连接4. 自连接5. 子查询6. 合并查询7. 插入查询结果摘要前面我们学习了数据库设计时要满

Python函数作用域示例详解

《Python函数作用域示例详解》本文介绍了Python中的LEGB作用域规则,详细解析了变量查找的四个层级,通过具体代码示例,展示了各层级的变量访问规则和特性,对python函数作用域相关知识感兴趣... 目录一、LEGB 规则二、作用域实例2.1 局部作用域(Local)2.2 闭包作用域(Enclos

怎样通过分析GC日志来定位Java进程的内存问题

《怎样通过分析GC日志来定位Java进程的内存问题》:本文主要介绍怎样通过分析GC日志来定位Java进程的内存问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、GC 日志基础配置1. 启用详细 GC 日志2. 不同收集器的日志格式二、关键指标与分析维度1.

Python实现对阿里云OSS对象存储的操作详解

《Python实现对阿里云OSS对象存储的操作详解》这篇文章主要为大家详细介绍了Python实现对阿里云OSS对象存储的操作相关知识,包括连接,上传,下载,列举等功能,感兴趣的小伙伴可以了解下... 目录一、直接使用代码二、详细使用1. 环境准备2. 初始化配置3. bucket配置创建4. 文件上传到os

解读GC日志中的各项指标用法

《解读GC日志中的各项指标用法》:本文主要介绍GC日志中的各项指标用法,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、基础 GC 日志格式(以 G1 为例)1. Minor GC 日志2. Full GC 日志二、关键指标解析1. GC 类型与触发原因2. 堆