6. 实现简单的线程池

news2024/11/18 4:21:10

本文以营业厅为例子,实现简单的线程池

一、线程池介绍

现在的企业客户端数以百万,如果某一时刻同时向服务器发消息,那么服务器要处理这些消息是同时开百万个线程吗??当然不行!!
根据posix标准,一个线程大概占8M空间,那么对于16G的内存,最多也就是开2048个线程。因此此时需要线程池。

线程池是一种常见的并发编程模型,它可以有效地管理和复用线程资源,提高程序运行效率和响应速度。通常情况下,线程池由一个任务队列和若干个工作线程组成。

线程池的优点包括:

  • 提高性能:线程池可以重复使用现有的线程,避免了频繁创建和销毁线程的开销,从而提高程序的性能。

  • 提高响应速度:线程池中已经创建好的空闲线程可以立即响应任务请求,减少了任务等待时间,提高了程序的响应速度。

  • 控制并发数量:线程池可以限制同时执行的任务数量,有效地控制了系统资源的消耗。

  • 管理线程:线程池可以统一管理所有线程,并且可以设置线程池参数来满足业务需求。

  • 提供更好的可扩展性:通过使用线程池,我们可以灵活地调整系统中任务队列长度和工作线程数目,从而实现更好的可扩展性。

二、实现一个简单的线程池

以银行营业厅进行类比:
在这里插入图片描述

#include<stdio.h>
#include <string.h>
#include <stdlib.h>
#include<pthread.h>
#include<errno.h>


//''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''
//''''''''''''''''''''属性''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''

#define LIST_INSERT(item ,list) do{\
    item->prev=NULL;        \
    item->next=list;        \
    if ((list) != NULL) list->prev=item; \
    (list)=item;            \
}while(0)

#define LIST_REMOVE(item,list) do{\
    if(item->prev != NULL) item->prev->next=item->next; \
    if(item->next != NULL) item->next->prev=item->prev; \
    if(list==item) list=item->next;                     \
    item->prev=item->next=NULL;                          \
}while(0)


//顾客
struct nTask
{
    void (*task_fun)(struct nTask*);
    void *user_data;
    struct nTask *prev;
    struct nTask *next;
};

//业务员
struct nWorker{
    pthread_t threadid;
    int terminate;  //判断线程是否终止
    struct nManager *manager; //业务员中应当有管理权限,如查看任务队列是否为空

    struct nWorker *prev;
    struct nWorker *next;
};

//线程池
typedef struct nManager{
    struct nTask *tasks;    //任务队列
    struct nWorker *workers;    //执行队列

    pthread_mutex_t mutex;
    pthread_cond_t cond;
}ThreadPool;


//''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''
//''''''''''''''''''''接口层''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''

//线程的回调
//判断任务队列是否内是否有任务,若有取出执行,若无等待任务
static void *nThreadPoolCallback(void *arg){
    struct nWorker *worker=(struct nWorker *)arg;

    printf("nThreadPoolCallback\n");
    while (1){
        //加锁
        pthread_mutex_lock(&worker->manager->mutex);

        //若任务队列为空,等待
        while(worker->manager->tasks == NULL){
            if (worker->terminate) break; //此时该线程上的任务队列为空,因此不解锁退出也不会影响其他线程,即不会造成死锁
            pthread_cond_wait(&worker->manager->cond,&worker->manager->mutex);
        }
        if(worker->terminate){
            //需要先解锁后退出,否则会死锁
            pthread_mutex_unlock(&worker->manager->mutex);
            break;
        }

        //取出第一个任务,而后从任务队列删除该任务
        struct nTask *task=worker->manager->tasks;  //指向任务队列(链表)的第一个任务
        LIST_REMOVE(task,worker->manager->tasks);

        //解锁
        pthread_mutex_unlock(&worker->manager->mutex);

        //线程执行该任务
        task->task_fun(task);
    }
    free(worker);
}

//创建线程池
int nThreadPoolCreat(ThreadPool *pool,int numWorkers){
    if (pool == NULL) return -1;
    if (numWorkers < 1) numWorkers=1;
    memset(pool,0,sizeof(ThreadPool));

    //初始化
    pthread_mutex_init(&pool->mutex,NULL);
    pthread_cond_init(&pool->cond,NULL);

    //创建线程(业务员),加入到执行队列中
    int i=0;
    for(i=0;i<numWorkers;i++){
        //分配内存,并初始化(堆区创建的数据一定要初始化)
        struct nWorker *worker=(struct nWorker *)malloc(sizeof(struct nWorker ));
        if (worker == NULL){
            perror("malloc");
            return -2;
        }
        memset(worker,0,sizeof(struct nWorker));
        worker->manager=pool;

        //创建线程(业务员)
        int ret = pthread_create(&worker->threadid, NULL, nThreadPoolCallback, worker);
        if (ret){
            perror("pthread_creat");
            free(worker);
            return -3;
        }

        //将线程(业务员)加入到任务队列中
        printf("LIST_INSERT\n");
        LIST_INSERT(worker,pool->workers);       
    }

    //sucess
    return 0;
}

//销毁线程池
int nThreadPoolDestory(ThreadPool *pool){
    //将线程池内的所有线程状态terminate设为真,表示退出
    struct nWorker *worker=NULL;
    for (worker=pool->workers;worker!=NULL;worker=worker->next){
        worker->terminate;
    }

    //获取与条件变量相关联的互斥锁-->向所有等待在该条件变量上的线程发送信号以唤醒它们-->释放线程池的互斥锁
    //pthread_cond_broadcast配合pthread_cond_wait使用,获取的是同一把锁
    pthread_mutex_lock(&pool->mutex);
    pthread_cond_broadcast(&pool->cond);
    pthread_mutex_unlock(&pool->mutex);

    //将线程池中的workers和tasks指针分别设置为NULL,释放内存空间
    pool->tasks=NULL;
    pool->workers=NULL;

    return 0;
}

//往线程池加入任务
int nThreadPoolPushTask(ThreadPool *pool,struct nTask *task){
    /*pthread_cond_signal通知等待在条件变量上的某个线程去获取锁并继续执行。如果此时没有加锁,
    那么可能会出现竞态条件(Race Condition),也就是多个线程同时进入临界区域并修改共享数据,从而导致程序逻辑错误或者崩溃。
    */
    pthread_mutex_lock(&pool->mutex);
    LIST_INSERT(task,pool->tasks);
    pthread_cond_signal(&pool->cond);
    pthread_mutex_unlock(&pool->mutex);
}

//''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''
//''''''''''''''''''''调试接口''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''''
#if 1

#define THREADPOOL_INIT_COUNT   2
#define TASK_INIT_COUNT         20


void task_entry(struct nTask *task){
    int idx=*(int *)task->user_data;

    printf("idx: %d\n",idx);

    free(task->user_data);
    free(task);
}


int main(){
    ThreadPool pool={0};
    //创建线程
    nThreadPoolCreat(&pool,THREADPOOL_INIT_COUNT);
    printf("nThreadPoolCreat -- finish\n");

    //创建任务
    int i=0;
    for (i=0;i<TASK_INIT_COUNT;i++){
        struct nTask *task=(struct nTask *)malloc(sizeof(struct nTask));
        if (task==NULL){
            perror("malloc");
            exit(1);
        }
        memset(task,0,sizeof(struct nTask));

        task->task_fun=task_entry;
        task->user_data=malloc(sizeof(int));
        *(int *)task->user_data=i;

        //加入任务队列
        nThreadPoolPushTask(&pool,task);
    }

   getchar();
}

#endif

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/554706.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

Pinna的使用以及pinna的持续化存储(两种方法)

一、简介 pinia是 vue3 新的状态管理工具&#xff0c;简单来说相当于之前 vuex&#xff0c;它去掉了 Mutations 但是也是支持 vue2 的&#xff0c;需要的朋友可以参考下 二、使用方法 1.安装 npm install pinia -S 2..引入 import { createPinia,PiniaPluginContext } from p…

RocketMQ(超级无敌认真好用,万字收藏篇!!!!)

文章目录 RocketMQ1 RocketMQ简介2 Rocket安装2.1 Rocket安装(基于Linux)2.2 控制台安装 3 Rocket的使用3.1 普通消息发送3.1.1 同步消息发送3.1.2 异步消息发送3.1.3 单向消息发送 3.2 普通消息消费3.2.1 集群消费3.2.2 广播消费 3.3 收发顺序消息3.3.1 全局顺序生产消费3.2.2…

今天面试招了个23K的人,从腾讯出来的果然都有两把刷子···

公司前段时间缺人&#xff0c;也面了不少测试&#xff0c;前面一开始瞄准的就是中级的水准&#xff0c;也没指望来大牛&#xff0c;提供的薪资在15-25k&#xff0c;面试的人很多&#xff0c;但平均水平很让人失望。看简历很多都是4年工作经验&#xff0c;但面试中&#xff0c;不…

黑客辛酸成长史~入门指南

什么是黑客&#xff1f; 站在计算机角度上解释&#xff0c;黑客就是去寻找网站、系统、软件等漏洞&#xff0c;并利用漏洞来取得一些数据或达到控制&#xff0c;让对方程序崩溃等效果。 刚入门的黑客大部分从事渗透工作&#xff0c;而渗透大部分属于web安全方向。因此换个淳朴…

科技政策 | 科技型中小企业、高新技术企业、技术先进型服务企业认定申报时间

原创 | 文 BFT机器人 01 科技型中小企业评价入库 &#xff08;一&#xff09;科技型中小企业评价入口&#xff1a; https://fuwu.most.gov.cn/ &#xff08;二&#xff09;《2023年科技型中小企业评价工作的通知》查看入口&#xff1a; http://gdstc.gd.gov.cn/zwgk_n/tzgg/c…

Typecho搭建和美化

概述 Typecho是一款轻量级的开源PHP博客系统&#xff0c;它简单易用&#xff0c;界面整洁&#xff0c;性能高效&#xff0c;主题、插件众多。我使用的是腾讯云轻量服务器&#xff0c;Typecho的应用模版&#xff0c;一键安装环境。构建自己的博客网站&#xff0c;记录生活、分享…

CSPM 未来发展的思考

由于数据泄露的持续威胁以及云的短暂和快节奏的特性&#xff0c;只有在最基础的层面上保护您的云才有意义。组织已经转向 CSPM 解决方案来锁定他们的平台。 今天我们来聊聊什么是CSPM&#xff0c;它如何去产生有有效的帮助&#xff0c;未来会向哪发展。 什么是 CSPM&#xff1…

【王道·操作系统】第一章计算机系统概述

一、 操作系统的基本概念 1.1 概念&#xff08;定义&#xff09;&#xff1a;什么是操作系统 操作系统operating system,OS&#xff1a;控制和管理整个计算机系统的硬件和软件资源&#xff0c;并合理地组织调度计算机的工作和资源的分配&#xff1b;以提供给用户和其他软件方…

防火墙之iptables(二)

防火墙之iptables&#xff08;二&#xff09; 一.SNAT原理与应用 1.应用环境 局域网主机共享单个公网IP地址接入Internet&#xff08;私网不能被Internet中正常路由&#xff09;2.SNAT原理 修改数据包的源地址内网访问外网 将从内网发送到外网的数据包的源IP由私网IP转换成…

Java-API简析_java.lang.Double类(基于JDK1.8)(浅析源码)

【版权声明】未经博主同意&#xff0c;谢绝转载&#xff01;&#xff08;请尊重原创&#xff0c;博主保留追究权&#xff09; https://blog.csdn.net/m0_69908381/article/details/130805572 出自【进步*于辰的博客】 其实我的【Java-API】专栏内的博文对大家来说意义是不大的。…

海睿思分享 | 浅谈医院大数据中心建设

随着大数据在医疗行业临床诊疗、医院管理、健康管理等领域应用热度增加&#xff0c;越来越多医院设立了大数据中心或者在信息中心基础上开展了大数据的建设。 什么是大数据中心&#xff1f;大数据中心和CDR的区别是什么&#xff1f;医院应该怎样进行大数据建设&#xff1f; 1 …

记录监控日志数据

日志数据简介 日志数据是系统、应用程序或网络设备上发生的所有事件的记录。启用日志记录后&#xff0c;系统会自动生成日志并带有时间戳。日志数据提供详细信息&#xff0c;例如谁是事件的一部分、发生的时间、发生的位置和方式。因此&#xff0c;它是解决操作问题和检测安全…

数据结构课程设计一元稀疏多项式计算器

数据结构课程设计任务书 学生姓名&#xff1a; 专业班级&#xff1a; 指导教师&#xff1a; 工作单位&#xff1a; 题 目: 一元稀疏多项式计算器 基础要求&#xff1a; 一元稀疏多项式简单计算器的基本功能是…

C++ 基础学习5

C 基础学习5 std::variantstd::remove、erasestd::string::erasestd::filesystemconst和constexpr的区别coreDump和异常的区别 实战 std::variant 参考&#xff1a;https://blog.csdn.net/hang_ning/article/details/123826220 https://blog.csdn.net/janeqi1987/article/deta…

SpringBoot使用-基于Idea搭建WebSocket应用

文章目录 前言搭建WebSocket应用的实操流程验证总结前言 SpringBoot是所有基于Spring开发项目的起点,使得开发者能快速搭建 Spring 项目。在Idea集成工具环境下,通过使用SpringBoot,开发人员选用合适的Maven设置,能够方便地搭建WebSocket应用。 搭建WebSocket应用的实操流…

Elastic Stack

一、简介 ELK是一个免费开源的日志分析架构技术栈总称&#xff0c;官网https://www.elastic.co/cn。包含三大基础组件&#xff0c;分别是Elasticsearch、Logstash、Kibana。但实际上ELK不仅仅适用于日志分析&#xff0c;它还可以支持其它任何数据搜索、分析和收集的场景&#…

推荐5款简单实用的win10小工具

今天要给大家推荐5款压箱底的宝贝软件了&#xff0c;百度搜索一下就能找到下载链接了。 1.笔记与知识管理——Evernote Evernote是一款功能强大的笔记管理工具,它可以帮助你记下生活中的点点滴滴并进行管理。这个工具拥有简洁的界面和强大的功能,可以添加文本、图片、录音、网…

tomcat maxThread 压力测试 700 并发以内最好

以前一直简单的认为多线程高效率。其实多线程本身并不能提高 cpu 效率&#xff0c;线程过多反而会降低 cpu 效率。当 cpu 核心数<线程数时&#xff0c;cpu 就需要在多个线程直接来回切换&#xff0c;以保证每个线程都会获得 cpu 时间&#xff0c;即通常我们说的并发执行。所…

基于python的WEIBO热点话题检测

微博是一个拥有海量用户的社交媒体平台&#xff0c;每天都会涌现出大量的话题和热点讨论。本文将介绍如何使用Python来实现微博热点话题检测技术&#xff0c;通过对微博文本的分析和处理&#xff0c;准确地捕捉到当前最热门的话题。 1. 数据获取 为了进行微博热点话题的检测&…

部门来了个测试开发,听说是00后,上来一顿操作给我看呆了...

公司新来了个同事&#xff0c;听说大学是学的广告专业&#xff0c;因为喜欢IT行业就找了个培训班&#xff0c;后来在一家小公司实习半年&#xff0c;现在跳槽来我们公司。来了之后把现有项目的性能优化了一遍&#xff0c;服务器缩减一半&#xff0c;性能反而提升4倍&#xff01…