LIUNX系统编程:进程池的实现

news2024/9/22 7:36:07

1.什么是进程池

每一个可执行程序,在被执行前都要转化为进程,操作系统都要为其创建PCB,地址空间,页表,构建映射关系,进程池就是创建进程时,创建很多个进程,如果要执行程序,就直接使用创建好的进程。就像一次性创建5个进程,肯定是比一次创建一个创建5次的效率更好的,将任务均匀的分配给进程执行。

2.进程池原理

采用面相对象的方法对进程管理根据需求抽离出进程的主要特征,将其组织起来就是进程池。

首先fork创建多个子进程。

对进程进行控制,通过父进程向管道中写入任务码,子进程读取任务码后,执行对应的任务。

对进程进行回收。

3.进程池的实现

创建进程池有一个隐藏非常深的bug,一个管道拥有多个写端,导致进程无法正常退出。

这里的退出方式,关闭管道的写端,读端就会读到文件末尾,进而退出进程。

主要的原因就是,子进程是父进程身上扒下来的,文件描述符表和父进程是一样的。

创建第一个进程的时候,将父进程读端关闭,子进程写端关闭。

我们在创建第二进程的时候,会把父进程文件描述表中的4,也给拷贝过来,这样另一个子进程也会指向管道的写端。

这样我们不想写入任务码了,关闭父进程的写端,但是还后其他的文件描述符在指向,这样就不会读到文件的末尾,就无法将进程退出。

我么可以采用两种方式解决这种问题。

1.从后向前关闭父进程的写端,因为最后创建的进程的管道,只有父进程指向写端,最后一个进程退出了,指向倒数第二个管道的写端的fd也就关闭了,依次就可正常退出了

2.讲每个进程的wfd存到vector中,fork之后将vctotr的wfd全部关闭,最后关闭完将该进程的写端fd存入vector中。

processpool.cpp

#include <iostream>
#include <vector>
#include <string>
#include <cstdlib>
#include <unistd.h>
#include <sys/types.h>
#include <sys/wait.h>
#include "task.hpp"
using namespace std;

enum//设置错误类型
{
    useageError = 1,//使用错误
    pipeError,
    forkError
};

class channal
{
public:
    channal(int wfd, string name, pid_t pid)
        : _wfd(wfd), _name(name), _pid(pid)
    {
    }
    
    int wfd()//返回该进程写端管道的fd
    {
        return _wfd;
    }
    
    string name()//返回该进程的名字
    {
        return _name;
    }

    pid_t pid()//返回该进程的pid
    {
        return _pid;
    }
    void Close()//关闭进程
    {
        close(_wfd);
    }
private:

    int _wfd;
    string _name;
    pid_t _pid;
};

class processpool
{
public:
    processpool(int sum)
        : _channalssum(sum)
    {
    }

    void create(work_t work/*回调函数*/)//创建进程
    {
        vector<int> wfds;
        int i = 0;
        while (i < _channalssum)
        {
            int pipfd[2] = {0};
            int ret = pipe(pipfd);
            // children read
            if (ret == -1)
            {
                exit(pipeError);
            }

            pid_t id = fork();

            if (id == -1)
            {
                exit(forkError);
            }

            // 子进程工作
            if (id == 0)
            {
                if(!wfds.empty())
                {
                    for(auto a:wfds)
                    {
                        close(a);
                    }
                }
                // read
                close(pipfd[1]);
                dup2(pipfd[0], 0);
                work();
                exit(0);
            }
            //父进程
            close(pipfd[0]);
            string cname = "childprocess" + to_string(i);
            channals.push_back(channal(pipfd[1],cname,id));
            wfds.push_back(pipfd[1]);
            i++;   
        }
    }

    int nextchannal()//选择管道
    {
        static int cnt = 0;
        cnt++;
        cnt %= channals.size();
        return cnt;
    }

    void sendCode(int index ,uint32_t code)//发送任务
    {
        cout << "send code: " << code << " to " << channals[index].name() << " sub prorcess id: " <<  channals[index].pid() << endl;
        write(channals[index].wfd(),&code,sizeof(code));
        sleep(1);
    }

    //关闭所有写端
    void killall()
    {
        for(auto &ch : channals)
        {
            ch.Close();
            pid_t rid = waitpid(ch.pid(),nullptr,0);
            if(rid == ch.pid())
            {
                cout<<"wait sucess pid:"<< ch.pid()<<endl;
            }
        }
    }

private:
    vector<channal> channals;
    int _channalssum;
};


void ctrlProcess(processpool &prp)
{
    int cnt = 5;
    while(cnt)
    {
        //选择渠道
        int index = prp.nextchannal();
        //选择任务
        uint32_t code = sendWork();
        //发送任务
        prp.sendCode(index,code);
        sleep(1);
        cnt--;
    }
}

int main(int argc, char *argv[])
{
    if (argc != 2)//参数不是 2个
    {
        cout << "uesageError" << endl;
        return useageError;
    }
    int sum = stoi(argv[1]);
    // 创建进程
    if (sum <= 0)
    {
        cout << "process sum must > 0" << endl;
        return forkError;
    }
    processpool prp(sum);
    prp.create(worker);

    //控制进程
    ctrlProcess(prp);
    //回收资源
    prp.killall();
    return 0;
}

task.hpp

#pragma once
using namespace std;

typedef void (*work_t)();//函数指针类型
typedef void (*task_t)();

void printlog()
{
    cout << "working printlog" << endl;
}

void linkMYSQL()
{
    cout << "working linkMYSQL" << endl;
}

void download()
{
    cout << "working downloade" << endl;
}

task_t _task[3] = {printlog, linkMYSQL, download};

int sendWork()
{
    int ret = rand() % 3;
    return ret;
}

void worker()
{
    //int cnt = 5;
    while (1)
    {
        uint32_t code = 0;
        size_t n = read(0, &code, sizeof(code));//从管道中读任务
        if (n == sizeof(code))
            _task[code]();
        else if(n == 0)//说明写端关闭了,读到文件的末尾了
        {
            cout<<"wfd closed quite now"<<endl;
            break;
        }
        cout << "i am working" << endl;
        sleep(1);
    }
}

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1645722.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

ROS仿真小车与SLAM

ROS仿真小车与SLAM ROS中机器小车的仿真实验一、建立模型1.创建功能包导入依赖&#xff1a;创建urdf,launch文件&#xff1a; 2.可视化 二、添加雷达传感器1.编写xacro文件2.集成launch文件3.添加摄像头和雷达传感器my_camera.urdf.xacro文件&#xff1a;my_laser.urdf.xacro文…

Retrofit源码解析

整体概述 这个是我看完Retrofit的源码后&#xff0c;站在一个高的维度俯瞰整个Retrofit的架构得到的结论。 Retrofit的出现就是对OKHttp做了一个二次封装&#xff0c;为什么要封装&#xff1f;我认为核心目的就是让使用更加的方便。都对哪里进行了封装&#xff1f; 封装了请求…

从一到无穷大 #25 DataFusion:可嵌入,可扩展的模块化工业级计算引擎实现

本作品采用知识共享署名-非商业性使用-相同方式共享 4.0 国际许可协议进行许可。 本作品 (李兆龙 博文, 由 李兆龙 创作)&#xff0c;由 李兆龙 确认&#xff0c;转载请注明版权。 文章目录 引言架构总览与可扩展性Catalog and Data SourcesFront End逻辑计划与逻辑计划优化器…

c3 笔记6 认识css样式表

<link>与import应该如何选择?事实上&#xff0c;使用link与import链接外部样式文件的效果看起来是一样的&#xff0c;区别在于<link>是HTML标记而import属于CSS语法。<link>标记有rel、type与href属性&#xff0c;可以指定CSS样式表的名称&#xff0c;这样就…

深度学习之DCGAN

目录 须知 转置卷积 DCGAN 什么是DCGAN 生成器代码 判别器代码 补充知识 LeakyReLU&#xff08;x&#xff09; torch.nn.Dropout torch.nn.Dropout2d DCGAN完整代码 运行结果 图形显示 须知 在讲解DCGAN之前我们首先要了解转置卷积和GAN 关于GAN在这片博客中已经很…

攻防世界-NewsCenter

题目信息 分析过程 题目打开是有个输入框可以用来输入搜索信息&#xff0c;初步判断是个sql注入的题目。接下来判断能否进行sql注入&#xff1a; 输入 hi&#xff0c;有搜索结果&#xff0c;如下图: 输入hi’,无结果&#xff0c;如下图&#xff1a; 初步判定是hi‘后面还有单引…

【Axure高保真原型】动态伸缩信息架构图

今天和大家分享动态伸缩信息架构图的原型模板&#xff0c;我们可以通过点击加减按钮来展开或收起子内容&#xff0c;具体效果可以点击下方视频观看或者打开预览地址来体验 【原型效果】 【Axure高保真原型】动态伸缩信息架构图 【原型预览含下载地址】 https://axhub.im/ax9/…

Python批量修改图片文件名中的指定名称

批量处理图像时&#xff0c;图片名有时需要统一&#xff0c;本教程仅针对图片中名如&#xff1a;0001x4.png&#xff0c;批量将图片名中的x4去除&#xff0c;只留下0001.png的情况。 如果想要按照原图片顺序批量修改图片名&#xff0c;参考其它博文&#xff1a;按照原顺序批量…

SpringBoot整合rabbitmq使用案例

RocketMQ&#xff08;二十四&#xff09;整合SpringBoot SpringBoot整合rabbitmq使用案例 一 SpringBoot整合RocketMQ实现消息发送和接收消息生产者1&#xff09;添加依赖2&#xff09;配置文件3&#xff09;启动类4&#xff09;测试类 消息消费者1&#xff09;添加依赖2&…

Sy9-dhcp/dns服务配置

前言、 课程需要&#xff08;进入服务器综合配置使用阶段了&#xff09;&#xff0c;这里还是沿用桌面版的ubuntu来配置dhcp和dns&#xff0c;这里updated了新的版本。2024.5 server端环境&#xff1a; Win11VMS&#xff1a;192.168.105.1192.168.105.128 &#xff08;ubuntu…

AI热潮开始退去,财务压力迫使多家硅谷明星初创公司选择退出

曾风光无限的Stability AI已重组并削减业务规模&#xff0c;Inflection AI更是关闭业务并基本并入微软。 5月4日消息&#xff0c;国外媒体日前撰文指出&#xff0c;人工智能的热潮已开始逐渐褪去。初创公司想要同微软、谷歌等科技巨头在人工智能领域一决高下&#xff0c;门槛已…

Spring IoCDI(2)—IoC详解

目录 一、IoC详解 1、Bean的存储 &#xff08;1&#xff09;Controller&#xff08;控制器存储&#xff09; 获取bean对象的其他方式 Bean 命名约定 &#xff08;2&#xff09;Service&#xff08;服务存储&#xff09; &#xff08;3&#xff09;Repository&#xff08…

SPA模式下的多页面跳转原理及实现——jQuery Mobile为例

jQuery Mobile在SPA模式下的多页面跳转原理及实现案例 文章目录 jQuery Mobile在SPA模式下的多页面跳转原理及实现案例前言一、SPA的实现原理和代码分析1.实现原理说明&#xff08;1&#xff09;index.html&#xff08;2&#xff09;index.js&#xff08;3&#xff09;page2.ht…

kafka日志存储

前言 kafka的主题(topic)可以对应多个分区(partition)&#xff0c;而每个分区(partition)可以有多个副本(replica)&#xff0c;我们提生产工单创建topic的时候也是要预设这些参数的。但是它究竟是如何存储的呢&#xff1f;我们在使用kafka发送消息时&#xff0c;实际表现是提交…

一款开源高性能AI应用框架

前言 LobeChat 是一个基于 Next.js 框架构建的 AI 会话应用&#xff0c;旨在提供一个 AI 生产力平台&#xff0c;使用户能够与 AI 进行自然语言交互。 LobeChat应用架构 LobeChat 的整体架构由前端、EdgeRuntime API、Agents 市场、插件市场和独立插件组成。这些组件相互协作&a…

38-1 防火墙了解

一、防火墙的概念: 防火墙(Firewall),也称防护墙,是由Check Point创立者Gil Shwed于1993年发明并引入国际互联网(US5606668 [A]1993-12-15)。它是一种位于内部网络与外部网络之间的网络安全系统,是一项信息安全的防护系统,依照特定的规则,允许或是限制传输的数据通过。…

4个可将 iPhone iPad iPod 修复至正常状态的 iOS 系统恢复软件

许多iOS用户对操作系统问题感到恐慌&#xff0c;例如iPhone卡在恢复模式、白屏死机、黑屏死机、iOS系统损坏、iTunes连接屏幕、iPhone数据丢失等。这些状态通常很无聊&#xff0c;因为您无法使用 iPhone 执行任何操作。 4个可将 iPhone iPad iPod 修复至正常状态的 iOS 系统恢复…

【Unity 组件思想-预制体】

【Unity 组件思想-预制体】 预制体&#xff08;Prefab&#xff09;是Unity中一种特殊的组件 特点和用途&#xff1a; 重用性&#xff1a; 预制体允许开发者创建可重复使用的自定义游戏对象。这意味着你可以创建一个预制体&#xff0c;然后在场景中多次实例化它&#xff0c;…

sip转webrtc方案

技术选型 由于很多企业会议协议用的主要是webrtc&#xff0c;但是项目上很多时候的一些旧设备只支持sip协议&#xff0c;并不支持webrtc协议。所以sip和webrtc的相互转换就很有必要。 流媒体服务mediasoup本身并不支持sip协议。那么如何实现sip转webrtc呢&#xff1f; 根据调研…

我独自升级崛起下载教程 我独自升级崛起怎么一键下载

定于5月8日全球盛大发布的动作RPG力作《我独自升级崛起》&#xff0c;基于备受追捧的同名动画及网络漫画&#xff0c;誓为热情洋溢的游戏爱好者们呈献一场深度与广度兼具的冒险盛宴。这款游戏巧妙融合网络武侠元素&#xff0c;其创意十足的设计框架下&#xff0c;核心叙述聚焦于…