python 多任务之多进程

news2025/1/13 13:55:28

多任务

优势

多个任务同时执行可以大大提高程序执行效率,可以充分利用CPU资源,提高程序的执行效率

概念

是指在同一时间内执行多个任务

多进程

概念

进程(process)是资源分配的最小单位,他是操作系统进行资源分配和调度运行的基本单位,比如:一个正在运行的程序就是一个进程,如QQ,微信等

一个程序的运行至少有一个进程,在程序运行后,默认会创建一个进程,称之为主进程,在主进程里面创建的进程,称之为子进程

进程的创建步骤

1.导入进程所需要的包
import multiprocessing


2.通过进程类创建进程对象
进程对象 = multiprocessing.Process(target=任务名)


3.启动进程
进程对象.start()

多进程的使用

import multiprocessing
import time

def eat():
    for i in range(10):
        print('正字吃饭=============')
        time.sleep(0.5)        # 等待0.5秒后再执行


def music():
    for i in range(10):
        print('正在唱歌=============')
        time.sleep(0.5)       # 等待0.5秒后再执行


if __name__ == '__main__':
    eat_process = multiprocessing.Process(target=eat,)
    music_process = multiprocessing.Process(target=music,)

    eat_process.start()
    music_process.start()

运行结果

进程执行任务函数的传参

  • 元组方式传参:元组方式传参一定要和参数的顺序保持一致
  • 字典方式传参:字典方式传参字典中的key一定要和参数名保持一致
import time
import multiprocessing

def eat(num, name):
    for i in range(num):
        print(f'{name}正字吃饭=============')
        time.sleep(0.5)  # 每隔0.5秒执行一次

def music(num, name):
    for i in range(num):
        print(f'{name}正在唱歌=============')
        time.sleep(0.5)  # 每隔0.5秒执行一次

if __name__ == '__main__':
    # 放在元组里面和传进去的参数一一对应,后面一定得加逗号
    eat_process = multiprocessing.Process(target=eat, args=(5, '张三'))
    # 放在字典里面是键值对形式,必须和传进入的参数名字一样,变量名一样
    music_process = multiprocessing.Process(target=music, kwargs={'num': 5, 'name': '张三'})

    eat_process.start()
    music_process.start()

执行结果

获取进程编号和杀死进程

作用:当程序中的进程数量很多,编号就是用来区分主进程和不同的子进程,进行有效的进程管理

获取进程编程的两种方式

1.获取当前进程编号,os.getpid()
import os
print('当前进程编号是:', os.getpid())


2.获取当前父进程编号,os.getppid()

import os
print('当前进程的父进程编号是:', os.getppid())

执行结果 

杀死进程kill

根据进程编号杀死指定进程

os.kill(进程编号, 9)

import os
import multiprocessing
import time

def work():
    # 查看当前进程
    current_process = multiprocessing.current_process()
    # 获取当前进程的编号
    print('work进程编号:', current_process.pid, os.getpid())
    # 获取父进程的编号
    print('work父进程的编号:', os.getppid())
    for i in range(20):
        print('正在工作=============')
        time.sleep(0.5)
        # 根据进程编号杀死对应的进程
        os.kill(os.getpid(), 9)

work()

执行结果

当第16行代码是这个的话   os.kill(os.getppid(), 9)    会怎么样呢?

程序会在执行一次print后,直接退出整个pycharm

管理不同的进程
import multiprocessing
import os

def eat():
    print('这是吃饭的进程的编号===', os.getpid())
    print('这是吃饭的父进程的编号===', os.getppid())

def music():
    print('这是唱歌的进程的编号===', os.getpid())
    print('这是唱歌的父进程的编号===', os.getppid())

if __name__ == '__main__':
    # 获取主进程的编号
    print('这是主进程的编号====', os.getpid())
    print(end='\n')

    eat_process = multiprocessing.Process(target=eat,)
    music_process = multiprocessing.Process(target=music,)

    eat_process.start()
    music_process.start()

执行结果

进程之间不共享全局变量

import time
import multiprocessing

def write_date():
    for i in range(3):
        my_list.append(i)
    print('这是子进程写入的表:', my_list)

def read_date():
    print('这是子进程读数据', my_list)


my_list = []

if __name__ == '__main__':

    write_process = multiprocessing.Process(target=write_date)
    read_process = multiprocessing.Process(target=read_date)

    write_process.start()
    # 主进程等待写入进程执行完成以后代码,再继续往下执行
    time.sleep(1)
    read_process.start()     # 这里是读不出来的,因为进程之间不共享全局变量

    print('这是主进程的:', my_list)     # 这里也是输出不了,只是三个变量名一样,但不是操作同一个全局变量

执行结果

守护主进程和销毁子进程

主进程会等待所有的子进程执行结束再结束

为了保证子进程能够正常运行,主进程会等待所有的子进程执行完成以后再销毁,设置守护主进程的目的是主进程退出子进程销毁,不让主进程再等待子进程去执行

两种方式都能保证主进程退出子进程销毁

        1、设置守护主进程:子进程对象.daemon = True
        2、销毁子进程:子进程对象.terminate()

import multiprocessing
import time

def eat():
    for i in range(10):
        print('正在吃饭==============')
        time.sleep(0.5)

if __name__ == '__main__':
    # 创建子进程
    eat_process = multiprocessing.Process(target=eat,)
    # 启动子进程
    eat_process.start()
    time.sleep(1)
    print('主进程执行完毕==========')

执行结果 

设置守护主进程
import multiprocessing
import time

def eat():
    for i in range(10):
        print('正在吃饭==========')
        time.sleep(0.5)

if __name__ == '__main__':

    eat_process = multiprocessing.Process(target=eat,)
    # 设置守护主进程,主进程退出后子进程直接销毁,不再执行子进程中的代码
    # 设置守护主进程必须在启动子进程之前
    eat_process.daemon = True
    eat_process.start()

    # 让主进程等待一秒
    time.sleep(2)
    print('主进程执行完毕========')

执行结果

销毁子进程
import multiprocessing
import time

def eat():
    for i in range(10):
        print('正在吃饭==========')
        time.sleep(0.5)

if __name__ == '__main__':

    eat_process = multiprocessing.Process(target=eat,)
    eat_process.start()

    # 让主进程等待一秒
    time.sleep(2)
    # 手动结束子进程,这个方式要写在开启子进程的下面
    eat_process.terminate()

    print('主进程执行完毕========')

执行结果

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1802977.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

EKF在LiFePO4电池SOC估算中不好用?一问带你破解EKF应用难题

磷酸铁锂电池因为平台区的存在,导致使用戴维南模型EKF的方法时,无法准确进行SOC准确预估。所以最近搜索了大量关于磷酸铁锂电池SOC预估的论文、期刊,但我被海量忽略客观事实、仅为了毕业的硕士论文给震惊到了。很多论文为了掩饰平台区的存在&…

C++ OpenCV 图像分类魔法:探索神奇的模型与代码

⭐️我叫忆_恒心,一名喜欢书写博客的研究生👨‍🎓。 如果觉得本文能帮到您,麻烦点个赞👍呗! 近期会不断在专栏里进行更新讲解博客~~~ 有什么问题的小伙伴 欢迎留言提问欧,喜欢的小伙伴给个三连支…

基于SSM的旅游民宿预定系统【源码】【运行教程】

基于SSM的旅游民宿预定系统 一、项目介绍1. 游客功能2. 管理员功能3. 高级功能 二、项目技术栈三、项目运行四、项目演示总结 大家好,这里是程序猿代码之路!随着旅游业的快速发展,民宿作为一种独特的住宿方式越来越受到游客的喜爱。为了提升用…

【Linux操作系统】Linux中进程的五种状态:R、S、D、T、X以及僵尸进程、孤儿进程

操作系统中有许多同时执行的进程,这些进程都可能处于不同的状态代表着不同的含义。 R运行状态(running) 概念:并不意味着进程一定在运行中,它表明进程要么是在运行中要么在运行队列里。 我们运行可执行程序myproc利用指令 ps ajx可以看到进程…

git凭证

默认是manager # 将凭证缓存到内存中,默认缓存15分钟 git config --global credential.helper cache# 将凭证存储到磁盘上的纯文本文件中 git config --global credential.helper store# 使用 Git 凭证管理器 git config --global credential.helper manager-core查…

微服务开发与实战Day03

一、导入黑马商城项目 资料文档:Docs 1. 安装MySQL ①删除root目录下的mysql rm -rf mysql/ ②把课前资料里的mysql目录上传到root目录下 ③创建一个通用网络 docker network create hm-net ④使用下面的命令安装MySQL docker run -d \--name mysql \-p 330…

CMakeLists如何多行注释

在使用Visual Studio编写CMakeLists的时候你可能会遇到需要多行注释的情况,可又不知道快捷键是什么。。。 其实你只需要敲个 #[[ 就行了,另外一般方括号VS会自动帮你补全,之后将需要注释的内容放在第二个方括号与第三个方括号之间就完成注释…

今天是放假带娃的一天

端午节放假第一天 早上5点半宝宝就咔咔乱叫了,几乎每天都这个点醒,准时的很,估计他是个勤奋的娃吧,要早起锻炼婴语,哈哈 醒来后做饭、洗锅、洗宝宝的衣服、给他吃D3,喂200ml奶粉、给他洗澡、哄睡&#xff0…

【上篇】从 YOLOv1 到 YOLOv8 的 YOLO 物体检测模型历史

YOLO 型号之所以闻名遐迩,主要有两个原因:其速度和准确性令人印象深刻,而且能够快速、可靠地检测图像中的物体。 在本文中,我将与大家分享我在阅读一篇长达 30 页的综合性论文时获得的见解,该论文深入探讨了 YOLO 模型的进步。 这篇评论全面概述了 YOLO 框架的演变过程,…

Python教程:Python操作MySQL基础使用

8、Python操作MySQL基础使用 8.1 安装pymysql pip install pymysql8.2 测试连接 测试代码 from pymysql import Connection# 获取到MySQL数据库的链接对象 conn Connection(# 主机名hostlocalhost,# 端口号,默认3306port3306,# 账户名userroot,# 密码password3535 )# 打印…

实现Ingress-Nginx Controller高可用方案

文章目录 前提准备1.修改Ingress-Controller 运行模式为hostNetwork并生效2.给部署ingress-controller的节点打标签3.查看ingress-controller的部署情况 方式一:LVSKeepalivedNginxIngress一、部署ipvsadm和keepalived二、配置keepalived1.配置lvs01(keepalived mas…

3.haproxy负载均衡

haproxy负载均衡 一、haproxy介绍1、负载均衡类型 二、haproxy配置文件1、backend2、frontend 三、haproxy实现MySQL负载均衡 —— 4层1、后端两台MySQL配置双主复制2、安装配置haproxy2.1 安装软件2.2 编辑配置2.3 启动haproxy2.4 测试通过haproxy正常连接MySQL 四、haproxy实…

机器学习----奥卡姆剃刀定律

奥卡姆剃刀定律(Occam’s Razor)是一条哲学原则,通常表述为“如无必要,勿增实体”(Entities should not be multiplied beyond necessity)或“在其他条件相同的情况下,最简单的解释往往是最好的…

容器化部署fastdfs文件存储

目录 一、软件信息 二、构建fastdfs镜像 三、docker 启动fdfs服务 四、k8s部署fdfs服务 1、fdfs部署文件 五、外部服务访问 一、软件信息 fastdfs版本:fastdfs:V5.11 libfastcommon版本: V1.0.36 fastdfs-nginx-module版本:V1.20 nginx版本&am…

【python】OpenCV—Blob Detection(11)

学习来自OpenCV基础(10)使用OpenCV进行Blob检测 文章目录 1、cv2.SimpleBlobDetector_create 中文文档2、默认 parameters3、配置 parameters附录——cv2.drawKeypoints 1、cv2.SimpleBlobDetector_create 中文文档 cv2.SimpleBlobDetector_create 是 O…

LeetCode72编辑距离

题目描述 解析 一般这种给出两个字符串的动态规划问题都是维护一个二维数组,尺寸和这两个字符串的长度相等,用二维做完了后可以尝试优化空间。这一题其实挺类似1143这题的,只不过相比1143的一种方式,变成了三种方式,就…

Linux基础2-基本指令4(cp,mv,cat,tac)

上篇文章我们说到了rmdir,rm,man,echo.重定向等知识。 Linux基础1-基本指令3-CSDN博客 本文继续梳理其他基础指令 1.本章重点 1.使用cp命令拷贝文件 2.使用mv命令移动文件 3.使用cat,tac查看小文本文件 2.cp命令 在linux中使用cp命令来拷贝粘贴文件 cp src(原文…

信息学奥赛初赛天天练-23-CSP-J2023基础题-指针、链表、哈夫曼树与哈夫曼编码的实战应用与技巧大揭秘

PDF文档公众号回复关键字:20240608 单项选择题(共15题,每题2分,共计30分:每题有且仅有一个正确选项) 4 假设有一个链表的节点定义如下: struct Node {int data; Node* next; };现在有一个指向链表头部…

【深度学习】CICIDS 2019,入侵检测,SVM支持向量机,随机森林,DNN训练,混淆矩阵

文章目录 数据集介绍Python环境随机森林训练结果SVM支持向量机训练结果DNN训练结果所有代码下载 数据集介绍 下载:https://www.kaggle.com/datasets/tarundhamor/cicids-2019-dataset 数据个数: # 删除label中是WebDDoS的数据df df[df[Label] ! WebDD…

Java Web学习笔记26——Element常用组件

常见组件: 就是一个复制和粘贴的过程。 Table表格:用于展示多条结构类的数据,可对数据进行排序、筛选、对比或其他自定义操作。 常见组件-分页主键: Pagination:分页:当数据量比较多时,使用分…