以生产者消费者模型为例理解多线程-C++11实现

线程的概念

为了减少程序并发执行的时空开销,使得并发粒度更细,并发性更好,把进程的两项功能
(独立分配资源和被调度分派执行)分开得到线程。线程是操作系统进程中能够独立执行的
实体,是处理器调度和分派的基本单位。

线程是进程的组成部份,每个进程有允许包含多个并发执行的实体,这就是多线程。

线程的组成:

  • 线程唯一的标识符及线程状态信息
  • 未运行时保存的线程上下文
  • 核心栈
  • 用于存放线程局部变量及用户栈的私有存储区

线程同步

当多个控制线程共享相同的内存时,需要确保每个线程看到一致的数据。当一个线程修改变
量时,其它线程在读取这个变量时可能看到一个不一致的值,因此我们需要对变量加锁,保
证同一时间只允许一个线程访问该变量。

互斥量

互斥量本质上是一把锁,在访问共享资源前对互斥量进行加锁,在访问完成后释放锁。对互
斥量加锁后,任何其它试图再次对互斥量加锁的线程都会被阻塞直到当前线程释放互斥量。

条件变量

条件变量是另一种同步机制。条件变量给多个线程提供一个会合的场所。条件变量与互斥量
一起使用时,允许线程以无竞争的方式等待特定条件的发生。

当不满足条件时,我们可以让当前线程等待,当满足条件时,我们可以唤醒其它等待的线程。

生产者消费者模型

这是一种在多线程环境常见的模型,生产者线程负责生产产品将产品放到缓冲区队列,消费者线
程从缓冲区取产品消费。可以出现多个生产者线程和多个消费者线程。

线程与线程之间的关系:

  • 生产者线程之间存在竞争关系,不能同时把产品放入缓冲区
  • 消费者线程之间存在竞争关系,不能同时从缓冲区取产品
  • 生产者线程和消费者线程需要通信,当缓冲区为空时,生产者线程需要等待消费者线程生
    产产品;当缓冲区满了,消费者线程需要等待生产者线程生产产品。当缓冲区中有一个产
    品时,生产者线程通知消费者线程可以消费;当满的缓冲区被消费者消费后需要通知生产
    者线程开始生产产品。

代码实例

    #include <condition_variable>
    #include <iostream>
    #include <mutex>
    #include <thread>
    #include <queue>
    #include <unistd.h>

    using namespace std;

    // 缓冲区队列,最大存储10个产品
    constexpr int MAX_SIZE = 10;
    long buffer[MAX_SIZE];

    // 插入产品位置
    int in = 0;
    // 输出产品位置
    int out = 0;
    // 计数,buffer中的产品数
    int counter = 0;

    // 产品
    long nextp = 0;

    // 互斥量,用于保护输出
    mutex print_mutex;
    // 互斥量,用于保护条件变量
    mutex condition_mutex;

    // 条件变量,非满条件
    condition_variable not_full;
    // 条件变量,非空条件
    condition_variable not_empty;

    // 生产产品花的时间
    int producer_time = 1;
    // 消费产品花的时间
    int consumer_time = 1;

    //生产产品
    void producer() {
      while (1) {
        // 花1秒生产产品
        sleep(producer_time);
        {
          // 输出当前生成的产品信息
          lock_guard<mutex> lock(print_mutex);
          cout << "生产者线程:队列位置 "  << in << " 产品编号: " << nextp + 1 << "\n";
        }
        // 改变条件时锁住互斥量
        unique_lock<mutex> lk(condition_mutex);
        // 缓冲区已满
        while (counter == MAX_SIZE) {
          {
            lock_guard<mutex> lock(print_mutex);
            cout << "等待消费者线程\n";
          }
          // 当前线程进入等待,直到缓冲区不为满状态
          not_full.wait(lk);
        }
        // 将产品放入队列中
        nextp++;
        buffer[in] = nextp;
        in = (in + 1) % MAX_SIZE;
        // 产品数量加1
        counter++;
        // 如果产品数量大于,满足非空条件,通知消费者线程可以消费
        if (counter >= 1) {
          not_empty.notify_all();
        }
        lk.unlock();
      }
    }

    void consumer() {
      while (1) {
        unique_lock<mutex> lk(condition_mutex);
        // 如果缓冲区产品为空,等待生产者线程
        while (counter == 0) {
          {
            lock_guard<mutex> lock(print_mutex);
            cout << "等待生产者线程\n";
          }
          // 等待生产者线程,直到满足缓冲区非空条件
          not_empty.wait(lk);
        }
        // 取出产品
        long nextc = buffer[out];
        int old_out = out;
        out = (out + 1) % MAX_SIZE;
        counter--;
        // 如果满足缓冲区非满条件,唤醒生产者线程
        if (counter < MAX_SIZE) {
          not_full.notify_all();
        }
        lk.unlock();
        sleep(consumer_time);
        {
          lock_guard<mutex> lock(print_mutex);
          cout << "消费者线程 队列位置:" << old_out << " 产品编号: " << nextc << "\n";
        }
      }
    }

    int main() {
      // 生产者线程
      thread t1(producer);
      // 消费者线程
      thread t2(consumer);
      t2.join();
      t1.join();
      return 0;
    }

一个生产者和消费者只是n个生产者和n个消费者的特殊情况,上面的producer()和
consumer()可以用于n个生产者和n个消费者的情况。

一个特别应该关注的点是条件的判断:

    // 缓冲区已满
    while (counter == MAX_SIZE) {
      {
        lock_guard<mutex> lock(print_mutex);
        cout << "等待消费者线程\n";
      }
      // 当前线程进入等待,直到缓冲区不为满状态
      not_full.wait(lk);
    }

    // 如果缓冲区产品为空,等待生产者线程
    while (counter == 0) {
      {
        lock_guard<mutex> lock(print_mutex);
        cout << "等待生产者线程\n";
      }
      // 等待生产者线程,直到满足缓冲区非空条件
      not_empty.wait(lk);
    }

这里判断用的while而不能够用if。考虑有多个生产者的情况,当缓冲区满时,多个生产者线程阻塞在 not_full.wait(lk)这里,当消费者消费一个产品后,会通知所有阻塞的生产者线程,调度器随机调度一个生产者线程恢复执行,该线程会获取condition_mutex,执行完后缓冲区重新变满。当这个线程释放condition_mutex后,阻塞的其它线程会获取这个mutex从而开始执行,如果是if不是while,这个生产者线程就不会再次判断缓冲区是否是满的而执行下面的步骤,导致缓冲区溢出。多个消费者同理

可以通过修改sleep()的时间,验证各种情况!

  • 2
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
#include<windows.h> #include<fstream.h> #include<stdio.h> #include<string> #include<conio.h> //定义一些常量; //本程序允许的最大临界区数; #define MAX_BUFFER_NUM 10 //秒到微秒的乘法因子; #define INTE_PER_SEC 1000 //本程序允许的生产消费线程的总数; #define MAX_THREAD_NUM 64 //定义一个结构,记录在测试文件中指定的每一个线程的参数 struct ThreadInfo { int serial; //线程序列号 char entity; //是P还是C double delay; //线程延迟 int thread_request[MAX_THREAD_NUM]; //线程请求队列 int n_request; //请求个数 }; //全局变量的定义 //临界区对象的声明,用于管理缓冲区的互斥访问; int Buffer_Critical[MAX_BUFFER_NUM]; //缓冲区声明,用于存放产品; ThreadInfo Thread_Info[MAX_THREAD_NUM]; //线程信息数组; HANDLE h_Thread[MAX_THREAD_NUM]; //用于存储每个线程句柄的数组; HANDLE empty_semaphore; //一个信号量; HANDLE h_mutex; //一个互斥量; HANDLE h_Semaphore[MAX_THREAD_NUM]; //生产者允许消费者开始消费的信号量; CRITICAL_SECTION PC_Critical[MAX_BUFFER_NUM]; DWORD n_Thread = 0; //实际的线程的数目; DWORD n_Buffer_or_Critical; //实际的缓冲区或者临界区的数目; //生产消费及辅助函数的声明 void Produce(void *p); void Consume(void *p); bool IfInOtherRequest(int); int FindProducePositon(); int FindBufferPosition(int); int main(int argc, char **argv) { //声明所需变量; DWORD wait_for_all; ifstream inFile; if (argc!=2) { printf("Usage:%s <File>\n",argv[0]); return 1; } //初始化缓冲区; for(int i=0;i< MAX_BUFFER_NUM;i++) Buffer_Critical[i] = -1; //初始化每个线程的请求队列; for(int j=0;j<MAX_THREAD_NUM;j++) { for(int k=0;k<MAX_THREAD_NUM;k++) Thread_Info[j].thread_request[k] = -1; Thread_Info[j].n_request = 0; } //初始化临界区; for(i =0;i< MAX_BUFFER_NUM;i++) InitializeCriticalSection(&PC_Critical[i]); //打开输入文件,按照规定的格式提取线程等信息; inFile.open(argv[1]); //从文件中获得实际的缓冲区的数目,即测试文件第一行的信息; inFile >> n_Buffer_or_Critical; inFile.get(); // 读取测试文件中的空格,将文件指针指向下一行; printf("输入文件是:\n"); //回显获得的缓冲区的数目信息; printf("%d \n",(int) n_Buffer_or_Critical); //提取每个线程的信息到相应数据结构中; while(inFile){ inFile >> Thread_Info[n_Thread].serial; inFile >> Thread_Info[n_Thread].entity; inFile >> Thread_Info[n_Thread].delay; char c; inFile.get(c); while(c!='\n'&& !inFile.eof()) { inFile>> Thread_Info[n_Thread].thread_request[Thread_Info[n_Thread].n_request++]; inFile.get(c); } n_Thread++; } //回显获得的线程信息,便于确认正确性; for(j=0;j<(int) n_Thread;j++) { int Temp_serial = Thread_Info[j].serial; char Temp_entity = Thread_Info[j].entity; double Temp_delay = Thread_Info[j].delay; printf(" \nthread%2d %c %f ",Temp_serial,Temp_entity,Temp_delay); int Temp_request = Thread_Info[j].n_request; for(int k=0;k<Temp_request;k++) printf(" %d ", Thread_Info[j].thread_request[k]); cout<<endl; } printf("\n\n"); //创建在模拟过程中几个必要的信号量 empty_semaphore = CreateSemaphore(NULL,n_Buffer_or_Critical,n_Buffer_or_Critical, "semaphore_for_empty"); h_mutex = CreateMutex(NULL,FALSE,"mutex_for_update"); //下面这个循环用线程的ID号来为相应生产线程的产品读写时所 //使用的同步信号量命名; for(j=0;j<(int)n_Thread;j++) { char lp[]="semaphore_for_produce_"; int temp =j; while(temp){ char c = (char)(temp%10); strcat(lp,&c); temp/=10; } h_Semaphore[j+1]=CreateSemaphore(NULL,0,n_Thread,lp); } //创建生产者和消费者线程; for(i =0;i< (int) n_Thread;i++) { if(Thread_Info[i].entity =='P') h_Thread[i]= CreateThread(NULL,0,(LPTHREAD_START_ROUTINE)(Produce), &(Thread_Info[i]),0,NULL); else h_Thread[i]=CreateThread(NULL,0,(LPTHREAD_START_ROUTINE)(Consume), &(Thread_Info[i]),0,NULL); } //主程序等待各个线程的动作结束; wait_for_all = WaitForMultipleObjects(n_Thread,h_Thread,TRUE,-1); printf(" \n \nALL Producer and consumer have finished their work. \n"); printf("Press any key to quit!\n"); _getch(); return 0; } //确认是否还有对同一产品的消费请求未执行; bool IfInOtherRequest(int req) { for(int i=0;i<n_Thread;i++) for(int j=0;j<Thread_Info[i].n_request;j++) if(Thread_Info[i].thread_request[j] == req) return TRUE; return FALSE; } //找出当前可以进行产品生产的空缓冲区位置; int FindProducePosition() { int EmptyPosition; for (int i =0;i<n_Buffer_or_Critical;i++) if(Buffer_Critical[i] == -1) { EmptyPosition = i; //用下面这个特殊值表示本缓冲区正处于被写状态; Buffer_Critical[i] = -2; break; } return EmptyPosition; } //找出当前所需生产生产的产品的位置; int FindBufferPosition(int ProPos) { int TempPos; for (int i =0 ;i<n_Buffer_or_Critical;i++) if(Buffer_Critical[i]==ProPos){ TempPos = i; break; } return TempPos; } //生产者进程 void Produce(void *p) { //局部变量声明; DWORD wait_for_semaphore,wait_for_mutex,m_delay; int m_serial; //获得本线程的信息; m_serial = ((ThreadInfo*)(p))->serial; m_delay = (DWORD)(((ThreadInfo*)(p))->delay *INTE_PER_SEC); Sleep(m_delay); //开始请求生产 printf("Producer %2d sends the produce require.\n",m_serial); //互斥访问下一个可用于生产的空临界区,实现写写互斥; wait_for_mutex = WaitForSingleObject(h_mutex,-1); //确认有空缓冲区可供生产,同时将空位置数empty减1;用于生产者和消费者的同步; //若没有则一直等待,直到消费者进程释放资源为止; wait_for_semaphore = WaitForSingleObject(empty_semaphore,-1); int ProducePos = FindProducePosition(); ReleaseMutex(h_mutex); //生产者在获得自己的空位置并做上标记后,以下的写操作在生产者之间可以并发; //核心生产步骤中,程序将生产者的ID作为产品编号放入,方便消费者识别; printf("Producer %2d begin to produce at position %2d.\n",m_serial,ProducePos); Buffer_Critical[ProducePos] = m_serial; printf("Producer %2d finish producing :\n ",m_serial); printf(" position[ %2d ]:%3d \n\n" ,ProducePos,Buffer_Critical[ProducePos]); //使生产者写的缓冲区可以被多个消费者使用,实现读写同步; ReleaseSemaphore(h_Semaphore[m_serial],n_Thread,NULL); } //消费者进程 void Consume(void * p) { //局部变量声明; DWORD wait_for_semaphore,m_delay; int m_serial,m_requestNum; //消费者的序列号和请求的数目; int m_thread_request[MAX_THREAD_NUM]; //本消费线程的请求队列; //提取本线程的信息到本地; m_serial = ((ThreadInfo*)(p))->serial; m_delay = (DWORD)(((ThreadInfo*)(p))->delay *INTE_PER_SEC); m_requestNum = ((ThreadInfo *)(p))->n_request; for (int i = 0;i<m_requestNum;i++) m_thread_request[i] = ((ThreadInfo*)(p))->thread_request[i]; Sleep(m_delay); //循环进行所需产品的消费 for(i =0;i<m_requestNum;i++){ //请求消费下一个产品 printf("Consumer %2d request to consume %2d product\n",m_serial,m_thread_request[i]); //如果对应生产者没有生产,则等待;如果生产了,允许的消费者数目-1;实现了读写同步; wait_for_semaphore=WaitForSingleObject(h_Semaphore[m_thread_request[i]],-1); //查询所需产品放到缓冲区的号 int BufferPos=FindBufferPosition(m_thread_request[i]); //开始进行具体缓冲区的消费处理,读和读在该缓冲区上仍然是互斥的; //进入临界区后执行消费动作;并在完成此次请求后,通知另外的消费者本处请求已 //经满足;同时如果对应的产品使用完毕,就做相应处理;并给出相应动作的界面提 //示;该相应处理指将相应缓冲区清空,并增加代表空缓冲区的信号量; EnterCriticalSection(&PC_Critical[BufferPos]); printf("Consumer %2d begin to consume %2d product \n",m_serial,m_thread_request[i]); ((ThreadInfo*)(p))->thread_request[i] =-1; if(!IfInOtherRequest(m_thread_request[i])) { Buffer_Critical[BufferPos] = -1; //-1标记缓冲区为空; printf("Consumer %2d finish consuming %2d:\n ",m_serial,m_thread_request[i]); printf(" position[ %2d ]:%3d \n\n" ,BufferPos,Buffer_Critical[BufferPos]); ReleaseSemaphore(empty_semaphore,1,NULL); } else { printf("Consumer %2d finish consuming product %2d\n\n ",m_serial,m_thread_request[i]); } //离开临界区 LeaveCriticalSection(&PC_Critical[BufferPos]); } }
在C语言中实现多线程生产者消费者模型可以使用线程库pthread。下面是一个简单的示例代码: ```c #include <stdio.h> #include <stdlib.h> #include <pthread.h> #define BUFFER_SIZE 5 int buffer[BUFFER_SIZE]; int count = 0; // 缓冲区中的数据数量 pthread_mutex_t mutex = PTHREAD_MUTEX_INITIALIZER; // 互斥锁 pthread_cond_t empty = PTHREAD_COND_INITIALIZER; // 缓冲区为空的条件变量 pthread_cond_t full = PTHREAD_COND_INITIALIZER; // 缓冲区为满的条件变量 void* producer(void* arg) { int item; while (1) { item = rand() % 100; // 生成随机数作为生产的物品 pthread_mutex_lock(&mutex); // 加锁 while (count == BUFFER_SIZE) { // 如果缓冲区已满,等待 pthread_cond_wait(&empty, &mutex); } buffer[count++] = item; // 将物品放入缓冲区 printf("Producer produced item: %d\n", item); pthread_cond_signal(&full); // 唤醒等待的消费者 pthread_mutex_unlock(&mutex); // 解锁 } return NULL; } void* consumer(void* arg) { int item; while (1) { pthread_mutex_lock(&mutex); // 加锁 while (count == 0) { // 如果缓冲区为空,等待 pthread_cond_wait(&full, &mutex); } item = buffer[--count]; // 从缓冲区取出物品 printf("Consumer consumed item: %d\n", item); pthread_cond_signal(&empty); // 唤醒等待的生产者 pthread_mutex_unlock(&mutex); // 解锁 } return NULL; } int main() { pthread_t producer_thread, consumer_thread; pthread_create(&producer_thread, NULL, producer, NULL); pthread_create(&consumer_thread, NULL, consumer, NULL); pthread_join(producer_thread, NULL); pthread_join(consumer_thread, NULL); return 0; } ``` 这个示例代码中,定义了一个大小为5的缓冲区(使用数组实现),其中`count`变量表示缓冲区中的数据数量。生产者线程通过生成随机数作为物品,并将物品放入缓冲区。消费者线程从缓冲区中取出物品并进行消费。互斥锁`mutex`用于保护临界区资源的访问,条件变量`empty`和`full`用于实现生产者和消费者之间的同步。 请注意,这只是一个简单的示例代码,没有考虑线程安全性和错误处理。在实际使用中,还需要更加细致的设计和处理。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值