python 多任务之多进程

2024-06-08 22:20
文章标签 python 进程 多任务 之多

本文主要是介绍python 多任务之多进程,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

多任务

优势

多个任务同时执行可以大大提高程序执行效率,可以充分利用CPU资源,提高程序的执行效率

概念

是指在同一时间内执行多个任务

多进程

概念

进程(process)是资源分配的最小单位,他是操作系统进行资源分配和调度运行的基本单位,比如:一个正在运行的程序就是一个进程,如QQ,微信等

一个程序的运行至少有一个进程,在程序运行后,默认会创建一个进程,称之为主进程,在主进程里面创建的进程,称之为子进程

进程的创建步骤

1.导入进程所需要的包
import multiprocessing


2.通过进程类创建进程对象
进程对象 = multiprocessing.Process(target=任务名)


3.启动进程
进程对象.start()

多进程的使用

import multiprocessing
import timedef eat():for i in range(10):print('正字吃饭=============')time.sleep(0.5)        # 等待0.5秒后再执行def music():for i in range(10):print('正在唱歌=============')time.sleep(0.5)       # 等待0.5秒后再执行if __name__ == '__main__':eat_process = multiprocessing.Process(target=eat,)music_process = multiprocessing.Process(target=music,)eat_process.start()music_process.start()

运行结果

进程执行任务函数的传参

  • 元组方式传参:元组方式传参一定要和参数的顺序保持一致
  • 字典方式传参:字典方式传参字典中的key一定要和参数名保持一致
import time
import multiprocessingdef eat(num, name):for i in range(num):print(f'{name}正字吃饭=============')time.sleep(0.5)  # 每隔0.5秒执行一次def music(num, name):for i in range(num):print(f'{name}正在唱歌=============')time.sleep(0.5)  # 每隔0.5秒执行一次if __name__ == '__main__':# 放在元组里面和传进去的参数一一对应,后面一定得加逗号eat_process = multiprocessing.Process(target=eat, args=(5, '张三'))# 放在字典里面是键值对形式,必须和传进入的参数名字一样,变量名一样music_process = multiprocessing.Process(target=music, kwargs={'num': 5, 'name': '张三'})eat_process.start()music_process.start()

执行结果

获取进程编号和杀死进程

作用:当程序中的进程数量很多,编号就是用来区分主进程和不同的子进程,进行有效的进程管理

获取进程编程的两种方式

1.获取当前进程编号,os.getpid()
import os
print('当前进程编号是:', os.getpid())


2.获取当前父进程编号,os.getppid()

import os
print('当前进程的父进程编号是:', os.getppid())

执行结果 

杀死进程kill

根据进程编号杀死指定进程

os.kill(进程编号, 9)

import os
import multiprocessing
import timedef work():# 查看当前进程current_process = multiprocessing.current_process()# 获取当前进程的编号print('work进程编号:', current_process.pid, os.getpid())# 获取父进程的编号print('work父进程的编号:', os.getppid())for i in range(20):print('正在工作=============')time.sleep(0.5)# 根据进程编号杀死对应的进程os.kill(os.getpid(), 9)work()

执行结果

当第16行代码是这个的话   os.kill(os.getppid(), 9)    会怎么样呢?

程序会在执行一次print后,直接退出整个pycharm

管理不同的进程
import multiprocessing
import osdef eat():print('这是吃饭的进程的编号===', os.getpid())print('这是吃饭的父进程的编号===', os.getppid())def music():print('这是唱歌的进程的编号===', os.getpid())print('这是唱歌的父进程的编号===', os.getppid())if __name__ == '__main__':# 获取主进程的编号print('这是主进程的编号====', os.getpid())print(end='\n')eat_process = multiprocessing.Process(target=eat,)music_process = multiprocessing.Process(target=music,)eat_process.start()music_process.start()

执行结果

进程之间不共享全局变量

import time
import multiprocessingdef write_date():for i in range(3):my_list.append(i)print('这是子进程写入的表:', my_list)def read_date():print('这是子进程读数据', my_list)my_list = []if __name__ == '__main__':write_process = multiprocessing.Process(target=write_date)read_process = multiprocessing.Process(target=read_date)write_process.start()# 主进程等待写入进程执行完成以后代码,再继续往下执行time.sleep(1)read_process.start()     # 这里是读不出来的,因为进程之间不共享全局变量print('这是主进程的:', my_list)     # 这里也是输出不了,只是三个变量名一样,但不是操作同一个全局变量

执行结果

守护主进程和销毁子进程

主进程会等待所有的子进程执行结束再结束

为了保证子进程能够正常运行,主进程会等待所有的子进程执行完成以后再销毁,设置守护主进程的目的是主进程退出子进程销毁,不让主进程再等待子进程去执行

两种方式都能保证主进程退出子进程销毁

        1、设置守护主进程:子进程对象.daemon = True
        2、销毁子进程:子进程对象.terminate()

import multiprocessing
import timedef eat():for i in range(10):print('正在吃饭==============')time.sleep(0.5)if __name__ == '__main__':# 创建子进程eat_process = multiprocessing.Process(target=eat,)# 启动子进程eat_process.start()time.sleep(1)print('主进程执行完毕==========')

执行结果 

设置守护主进程
import multiprocessing
import timedef eat():for i in range(10):print('正在吃饭==========')time.sleep(0.5)if __name__ == '__main__':eat_process = multiprocessing.Process(target=eat,)# 设置守护主进程,主进程退出后子进程直接销毁,不再执行子进程中的代码# 设置守护主进程必须在启动子进程之前eat_process.daemon = Trueeat_process.start()# 让主进程等待一秒time.sleep(2)print('主进程执行完毕========')

执行结果

销毁子进程
import multiprocessing
import timedef eat():for i in range(10):print('正在吃饭==========')time.sleep(0.5)if __name__ == '__main__':eat_process = multiprocessing.Process(target=eat,)eat_process.start()# 让主进程等待一秒time.sleep(2)# 手动结束子进程,这个方式要写在开启子进程的下面eat_process.terminate()print('主进程执行完毕========')

执行结果

这篇关于python 多任务之多进程的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1043470

相关文章

Conda与Python venv虚拟环境的区别与使用方法详解

《Conda与Pythonvenv虚拟环境的区别与使用方法详解》随着Python社区的成长,虚拟环境的概念和技术也在不断发展,:本文主要介绍Conda与Pythonvenv虚拟环境的区别与使用... 目录前言一、Conda 与 python venv 的核心区别1. Conda 的特点2. Python v

Python使用python-can实现合并BLF文件

《Python使用python-can实现合并BLF文件》python-can库是Python生态中专注于CAN总线通信与数据处理的强大工具,本文将使用python-can为BLF文件合并提供高效灵活... 目录一、python-can 库:CAN 数据处理的利器二、BLF 文件合并核心代码解析1. 基础合

Python使用OpenCV实现获取视频时长的小工具

《Python使用OpenCV实现获取视频时长的小工具》在处理视频数据时,获取视频的时长是一项常见且基础的需求,本文将详细介绍如何使用Python和OpenCV获取视频时长,并对每一行代码进行深入解析... 目录一、代码实现二、代码解析1. 导入 OpenCV 库2. 定义获取视频时长的函数3. 打开视频文

Python中你不知道的gzip高级用法分享

《Python中你不知道的gzip高级用法分享》在当今大数据时代,数据存储和传输成本已成为每个开发者必须考虑的问题,Python内置的gzip模块提供了一种简单高效的解决方案,下面小编就来和大家详细讲... 目录前言:为什么数据压缩如此重要1. gzip 模块基础介绍2. 基本压缩与解压缩操作2.1 压缩文

Python设置Cookie永不超时的详细指南

《Python设置Cookie永不超时的详细指南》Cookie是一种存储在用户浏览器中的小型数据片段,用于记录用户的登录状态、偏好设置等信息,下面小编就来和大家详细讲讲Python如何设置Cookie... 目录一、Cookie的作用与重要性二、Cookie过期的原因三、实现Cookie永不超时的方法(一)

Python内置函数之classmethod函数使用详解

《Python内置函数之classmethod函数使用详解》:本文主要介绍Python内置函数之classmethod函数使用方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地... 目录1. 类方法定义与基本语法2. 类方法 vs 实例方法 vs 静态方法3. 核心特性与用法(1编程客

Python函数作用域示例详解

《Python函数作用域示例详解》本文介绍了Python中的LEGB作用域规则,详细解析了变量查找的四个层级,通过具体代码示例,展示了各层级的变量访问规则和特性,对python函数作用域相关知识感兴趣... 目录一、LEGB 规则二、作用域实例2.1 局部作用域(Local)2.2 闭包作用域(Enclos

怎样通过分析GC日志来定位Java进程的内存问题

《怎样通过分析GC日志来定位Java进程的内存问题》:本文主要介绍怎样通过分析GC日志来定位Java进程的内存问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、GC 日志基础配置1. 启用详细 GC 日志2. 不同收集器的日志格式二、关键指标与分析维度1.

Java进程异常故障定位及排查过程

《Java进程异常故障定位及排查过程》:本文主要介绍Java进程异常故障定位及排查过程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、故障发现与初步判断1. 监控系统告警2. 日志初步分析二、核心排查工具与步骤1. 进程状态检查2. CPU 飙升问题3. 内存

Python实现对阿里云OSS对象存储的操作详解

《Python实现对阿里云OSS对象存储的操作详解》这篇文章主要为大家详细介绍了Python实现对阿里云OSS对象存储的操作相关知识,包括连接,上传,下载,列举等功能,感兴趣的小伙伴可以了解下... 目录一、直接使用代码二、详细使用1. 环境准备2. 初始化配置3. bucket配置创建4. 文件上传到os