python watchdog:监控文件系统事件的Python库

2024-03-05 17:08

本文主要是介绍python watchdog:监控文件系统事件的Python库,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

转载From:http://blog.csdn.net/chdhust/article/details/50514391


python watchdog:监控文件系统事件的Python库和shell工具

     watchdog用来监控指定目录/文件的变化,如添加删除文件或目录、修改文件内容、重命名文件或目录等,每种变化都会产生一个事件,且有一个特定的事件类与之对应,然后再通过事件处理类来处理对应的事件,怎么样处理事件完全可以自定义,只需继承事件处理类的基类并重写对应实例方法。

    先给一个官网的例子:

[python] view plain copy print ?
  1. import sys  
  2. import time  
  3. import logging  
  4. from watchdog.observers import Observer  
  5. from watchdog.events import LoggingEventHandler  
  6.   
  7. if __name__ == "__main__":  
  8.     logging.basicConfig(level=logging.INFO,  
  9.                         format='%(asctime)s - %(message)s',  
  10.                         datefmt='%Y-%m-%d %H:%M:%S')  
  11.     path = sys.argv[1if len(sys.argv) > 1 else '.'  
  12.     event_handler = LoggingEventHandler()  
  13.     observer = Observer()  
  14.     observer.schedule(event_handler, path, recursive=True)  
  15.     observer.start()  
  16.     try:  
  17.         while True:  
  18.             time.sleep(1)  
  19.     except KeyboardInterrupt:  
  20.         observer.stop()  
  21.     observer.join()  
    使用 LoggingEventHandler() 事件处理器,当指定目录发生任何变化都会打印消息到终端。

事件类(event):

[python] view plain copy print ?
  1. watchdog.events.FileSystemEvent(event_type,   
  2.                                 src_path,   
  3.                                 is_directory=False)             

事件类基类,所有具体事件类的父类。当一个目录或文件变化时,就会产生一个特定事件,也就是该类的子类。

属性和方法:
event.is_directory
该事件是否由一个目录触发

event.src_path
触发该事件的文件或目录路径

event.event_type
事件类型,为moveddeletedcreatedmodified的其中之一

event.key
返回元组(event_type, src_path, is_directory)

watchdog.events.FileSystemEvent类的子类:

watchdog.events.FileDeletedEvent() 
文件被删除时触发该事件

watchdog.events.DirDeletedEvent() 
目录被删除时触发该事件

watchdog.events.FileCreatedEvent() 
文件被创建时触发该事件

watchdog.events.DirCreatedEvent() 
目录被创建时触发该事件

watchdog.events.FileModifiedEvent() 
文件被修改时触发该事件(修改文件内容、修改文件inode信息如权限和访问时间,都会触发该事件)

watchdog.events.DirModifiedEvent() 
目录被修改时触发该事件

watchdog.events.FileMovedEvent() 
文件被移动或重命名时触发该事件,因为涉及文件移动,所以除了event.src_path表示原路径,还有event.dest_path表示目的路径

watchdog.events.DirMovedEvent() 
目录被移动或重命名时触发该事件,因为涉及文件移动,所以除了event.src_path表示原路径,还有event.dest_path表示目的路径

事件处理类(event handler):

watchdog.events.FileSystemEventHandler()          

事件处理器的基类,用于处理事件,用户需继承该类,并在子类中重写对应方法。

类实例方法如下:
self.dispatch(event)
接收到一个事件后,通过该方法来决定该event由下面哪个方法处理

self.on_any_event(event)
任何事件发生都会首先执行该方法,该方法默认为空,dispatch()方法会先执行该方法,然后再把event分派给其他方法处理

self.on_moved(event)
Called when a file or a directory is moved or renamed,也就是处理DirMovedEventFileMovedEvent事件,子类需重写该方法

self.on_created(event)
Called when a file or directory is created,也就是处理DirCreatedEventFileCreatedEvent事件,子类需重写该方法

self.on_deleted(event)
Called when a file or directory is deleted,也就是处理DirDeletedEventFileDeletedEvent事件,子类需重写该方法

self.on_modified(event)
Called when a file or directory is modified,也就是处理DirModifiedEventFileModifiedEvent事件,子类需重写该方法

watchdog默认提供的一些事件处理类
watchdog.events.PatternMatchingEventHandler(patterns=None, ignore_patterns=None, ignore_directories=False, case_sensitive=False)

该类会检查触发事件的src_pathdest_path(如果有的话),是否与patterns指定的模式匹配;ignore_patterns是需要排除不处理的模式,如果路径匹配该模式则不处理;还有ignore_directories为True则表示不处理由目录引起的事件;case_sensitive为True则表示路径不区分大小写。如果需要按模式匹配处理事件,则可以继承该类,不过需要自己实现on_moved()on_created()on_deleted()on_modified()这四个方法。

watchdog.events.RegexMatchingEventHandler(regexes=[r".*"], ignore_regexes=[], ignore_directories=False, case_sensitive=False)            

基本等同于PatternMatchingEventHandler()类,除了是使用正则,而不是模式匹配。

watchdog.events.LoggingEventHandler()               

使用logging模块记录所有事件信息,见文章开头的列举的官网例子。

例子:自定义事件处理类

[python] view plain copy print ?
  1. import time  
  2. from watchdog.observers import Observer  
  3. from watchdog.events import FileSystemEventHandler  
  4.   
  5. class MyHandler(FileSystemEventHandler):  
  6.     def on_modified(self, event):  
  7.         if event.src_path == "/home/sapser/scripts/test.log":      #监控指定文件内容、权限等变化  
  8.             print "log file %s changed!" % event.src_path  
  9.   
  10. if __name__ == "__main__":  
  11.     event_handler = MyHandler()  
  12.     observer = Observer()  
  13.     observer.schedule(event_handler, path='.', recursive=False)  
  14.     observer.start()  
  15.     try:  
  16.         while True:  
  17.             time.sleep(1)  
  18.     except KeyboardInterrupt:  
  19.         observer.stop()  
  20.     observer.join()<span style="font-weight: 700;">  
  21. </span>  
observer:
watchdog.observers.Observer(timeout=1)         

该类实现了监控文件变化,触发对应的事件类,然后调用关联的事件处理类来处理事件。该类其实是threading.Thread的子类,通过observer.start()使之运行在一个线程中,不会阻塞主进程运行,然后可以调用observer.stop()来停止该线程

实例属性及方法:
observer.schedule(event_handler, path, recursive=False)
监控指定路径path,该路径触发任何事件都会调用event_handler来处理,如果path是目录,则recursive=True则会递归监控该目录的所有变化。每一次调用schedule()对一个路径进行监控处理就叫做一个watch,schedule()方法会返回这个watch,接着可以对这个watch做其他操作,如为该watch增加多个event处理器等
注:内部由一个字典handlers来保存所有watch,watch的值是一个集合,包含对应此watch的所有event handler:

handlers = {watch1: set(event_handler1, event_handler2),watch2: set(event_handler),
}

observer.add_handler_for_watch(event_handler, watch)
添加一个新的事件处理器到watch中,watch是ObservedWatch()类或其子类的实例

observer.remove_handler_for_watch(event_handler, watch)
从watch中移除一个事件处理器

observer.unschedule(watch)
移除一个watch及这个watch上的所有事件处理器

observer.unschedule_all()
移除所有watch及关联的事件处理器

observer.on_thread_stop()
等同于observer.unschedule_all()

observer.stop()
调用该方法来停止observer线程

例子:为一个路径添加多个事件处理器

import time
import logging
from watchdog.observers import Observer
from watchdog.events import FileSystemEventHandler, LoggingEventHandler
from watchdog.observers.api import ObservedWatchclass MyHandler(FileSystemEventHandler):def on_modified(self, event):if event.src_path == "/home/sapser/scripts/test.log":print "log file %s changed!" % event.src_pathif __name__ == "__main__":event_handler1 = MyHandler()observer = Observer()watch = observer.schedule(event_handler1, path='.', recursive=True)logging.basicConfig(level=logging.INFO,format='%(asctime)s - %(message)s',datefmt='%Y-%m-%d %H:%M:%S')event_handler2 = LoggingEventHandler()  observer.add_handler_for_watch(event_handler2, watch)      #为watch新添加一个event handlerobserver.start()try:while True:time.sleep(1)except KeyboardInterrupt:observer.stop()observer.join()

这篇关于python watchdog:监控文件系统事件的Python库的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/777209

相关文章

python获取指定名字的程序的文件路径的两种方法

《python获取指定名字的程序的文件路径的两种方法》本文主要介绍了python获取指定名字的程序的文件路径的两种方法,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要... 最近在做项目,需要用到给定一个程序名字就可以自动获取到这个程序在Windows系统下的绝对路径,以下

使用Python批量将.ncm格式的音频文件转换为.mp3格式的实战详解

《使用Python批量将.ncm格式的音频文件转换为.mp3格式的实战详解》本文详细介绍了如何使用Python通过ncmdump工具批量将.ncm音频转换为.mp3的步骤,包括安装、配置ffmpeg环... 目录1. 前言2. 安装 ncmdump3. 实现 .ncm 转 .mp34. 执行过程5. 执行结

Python实现批量CSV转Excel的高性能处理方案

《Python实现批量CSV转Excel的高性能处理方案》在日常办公中,我们经常需要将CSV格式的数据转换为Excel文件,本文将介绍一个基于Python的高性能解决方案,感兴趣的小伙伴可以跟随小编一... 目录一、场景需求二、技术方案三、核心代码四、批量处理方案五、性能优化六、使用示例完整代码七、小结一、

Python中 try / except / else / finally 异常处理方法详解

《Python中try/except/else/finally异常处理方法详解》:本文主要介绍Python中try/except/else/finally异常处理方法的相关资料,涵... 目录1. 基本结构2. 各部分的作用tryexceptelsefinally3. 执行流程总结4. 常见用法(1)多个e

Python中logging模块用法示例总结

《Python中logging模块用法示例总结》在Python中logging模块是一个强大的日志记录工具,它允许用户将程序运行期间产生的日志信息输出到控制台或者写入到文件中,:本文主要介绍Pyt... 目录前言一. 基本使用1. 五种日志等级2.  设置报告等级3. 自定义格式4. C语言风格的格式化方法

Python实现精确小数计算的完全指南

《Python实现精确小数计算的完全指南》在金融计算、科学实验和工程领域,浮点数精度问题一直是开发者面临的重大挑战,本文将深入解析Python精确小数计算技术体系,感兴趣的小伙伴可以了解一下... 目录引言:小数精度问题的核心挑战一、浮点数精度问题分析1.1 浮点数精度陷阱1.2 浮点数误差来源二、基础解决

使用Python实现Word文档的自动化对比方案

《使用Python实现Word文档的自动化对比方案》我们经常需要比较两个Word文档的版本差异,无论是合同修订、论文修改还是代码文档更新,人工比对不仅效率低下,还容易遗漏关键改动,下面通过一个实际案例... 目录引言一、使用python-docx库解析文档结构二、使用difflib进行差异比对三、高级对比方

深度解析Python中递归下降解析器的原理与实现

《深度解析Python中递归下降解析器的原理与实现》在编译器设计、配置文件处理和数据转换领域,递归下降解析器是最常用且最直观的解析技术,本文将详细介绍递归下降解析器的原理与实现,感兴趣的小伙伴可以跟随... 目录引言:解析器的核心价值一、递归下降解析器基础1.1 核心概念解析1.2 基本架构二、简单算术表达

从入门到精通详解Python虚拟环境完全指南

《从入门到精通详解Python虚拟环境完全指南》Python虚拟环境是一个独立的Python运行环境,它允许你为不同的项目创建隔离的Python环境,下面小编就来和大家详细介绍一下吧... 目录什么是python虚拟环境一、使用venv创建和管理虚拟环境1.1 创建虚拟环境1.2 激活虚拟环境1.3 验证虚

详解python pycharm与cmd中制表符不一样

《详解pythonpycharm与cmd中制表符不一样》本文主要介绍了pythonpycharm与cmd中制表符不一样,这个问题通常是因为PyCharm和命令行(CMD)使用的制表符(tab)的宽... 这个问题通常是因为PyCharm和命令行(CMD)使用的制表符(tab)的宽度不同导致的。在PyChar