python生产教程_python入门教程12-09 （python语法入门之生产者消费者模型）

Python中的生产者消费者模型，在并发编程中使用生产者和消费者模式能够解决绝大多数并发问题，是本章的重点内容，下面我们一起来看看吧。

生产者消费者模型

在并发编程中使用生产者和消费者模式能够解决绝大多数并发问题。该模式通过平衡生产线程和消费线程的工作能力来提高程序的整体处理数据的速度。

什么是生产者消费者模式

生产者消费者模式是通过一个容器来解决生产者和消费者的强耦合问题。生产者和消费者彼此之间不直接通讯，而通过阻塞队列来进行通讯，所以生产者生产完数据(做包子的)之后不用等待消费者(吃包子的)处理，直接扔给阻塞队列(盘子)，消费者不找生产者要数据，而是直接从阻塞队列里取，阻塞队列就相当于一个缓冲区，平衡了生产者和消费者的处理能力。

为什么要使用生产者和消费者模式

在线程世界里，生产者就是生产数据的线程，消费者就是消费数据的线程。在多线程开发当中，如果生产者处理速度很快，而消费者处理速度很慢，那么生产者就必须等待消费者处理完，才能继续生产数据。同样的道理，如果消费者的处理能力大于生产者，那么消费者就必须等待生产者。为了解决这个问题于是引入了生产者和消费者模式。

基于队列实现生产者消费者模型

from multiprocessing import Process,Queueimport time,random,osdefconsumer(q): while True:

res=q.get()

time.sleep(random.randint(1,3))

print('%s 吃 %s' %(os.getpid(),res))defproducer(q): for i in range(10):

time.sleep(random.randint(1,3))

res='包子%s' %i

q.put(res)

print('%s 生产了 %s' %(os.getpid(),res))if __name__ == '__main__':

q=Queue()

#生产者们:即厨师们 p1=Process(target=producer,args=(q,))

#消费者们:即吃货们 c1=Process(target=consumer,args=(q,))

#开始 p1.start()

c1.start()

print('主')

python生产教程_python入门教程12-09 （python语法入门之生产者消费者模型）相关推荐

Python零基础速成班-第12讲-Python获取网络数据Socket，API接口，网络爬虫Crawler(制作弹幕词云)
Python零基础速成班-第12讲-Python获取网络数据Socket,API接口,网络爬虫Crawler(制作弹幕词云) 学习目标获取网络数据Socket API接口网络爬虫Crawler(制 ...
Python之路(第三十八篇) 并发编程：进程同步锁/互斥锁、信号量、事件、队列、生产者消费者模型...
一.进程锁(同步锁/互斥锁) 进程之间数据不共享,但是共享同一套文件系统,所以访问同一个文件,或同一个打印终端,是没有问题的, 而共享带来的是竞争,竞争带来的结果就是错乱,如何控制,就是加锁处理. 例 ...
python多线程实现生产者消费者_用Python实现多线程“生产者-消费者”模型的简单例子...
用 Python 实现多线程"生产者 - 消费者"模型的简单例子生产者消费者问题是一个著名的线程同步问题, 该问题描述如下: 有一个生产者在生产产品, 这些产品将提供给若干个消费 ...
4月25日 python学习总结互斥锁 IPC通信和生产者消费者模型
一.守护进程 import random import time from multiprocessing import Processdef task():print('name: egon')ti ...
Python并行编程(四)：多线程同步之condition(条件变量)实现带有缓冲区的生产者-消费者模型...
什么是Condtion? 所谓condition条件变量,即这种机制是在满足了特定的条件后,线程才可以访问相关的数据. 这种同步机制就是一个线程等待特定的条件,另一个线程通知它条件已经发生.一旦条件发 ...
python—生产者消费者模型
python-生产者消费者模型生产者和消费者模式是多线程开发中经常见到的一种模式.生产者的线程专门用来生产一些数据,然后存放到一个中间的变量中.消费者再从这个中间的变量中取出数据进行消费.通过生产者 ...
python之生产者消费者模型
python之生产者消费者模型生产者消费者模型作用于: 1.爬虫的时候 2.分布式操作:celery 其本质:就是让生产数据和消费数据的效率达到平衡并且最大化的效率为什么要使用生产者消费者模型? ...
Python 生产者消费者模型
Python 生产者消费者模型文章目录 Python 生产者消费者模型生产者消费者模型介绍生产者消费者模型实现函数yield 方式多进程方式实现一. 实现二. 多线程方式生产者消费者模型 ...
python 全栈开发，Day39(进程同步控制(锁,信号量,事件),进程间通信(队列,生产者消费者模型))...
昨日内容回顾 python中启动子进程并发编程并发 :多段程序看起来是同时运行的 ftp 网盘不支持并发 socketserver 多进程并发异步两个进程分别做不同的事情创建新进程 j ...

python生产教程_python入门教程12-09 （python语法入门之生产者消费者模型）

python生产教程_python入门教程12-09 （python语法入门之生产者消费者模型）相关推荐

最新文章

热门文章