python学习 使用队列queue(fifo-first in first out)来解决生产者和消费者耦合问题

【生产者和消费者模型】
在并发编程中使用生产者和消费者模式能够解决绝大多数并发问题。该模式通过平衡生产线程和消费线程的工作能力来提高程序的整体处理数据的速度。

【为什么要使用生产者和消费者模式】
在线程世界里,生产者就是生产数据的线程,消费者就是消费数据的线程。在多线程开发当中,如果生产者处理速度很快,而消费者处理速度很慢,那么生产者就必须等待消费者处理完,才能继续生产数据。同样的道理,如果消费者的处理能力大于生产者,那么消费者就必须等待生产者。为了解决这个问题于是引入了生产者和消费者模式。

【什么是生产者消费者模式】
生产者消费者模式是通过一个容器来解决生产者和消费者的强耦合问题。生产者和消费者彼此之间不直接通讯,而通过阻塞队列来进行通讯,所以生产者生产完数据之后不用等待消费者处理,直接扔给阻塞队列,消费者不找生产者要数据,而是直接从阻塞队列里取,阻塞队列就相当于一个缓冲区,平衡了生产者和消费者的处理能力。

 

 1 '''使用队列queue(fifo-first in first out)来解决生产者和消费者耦合问题'''
 2 #多线程和多进程都可以使用该模式解决生产者和消费者耦合问题
 3 from queue import Queue  #多线程使用队列,从此模块导入; 多进程则使用from multiprocessing import Queue导入
 4 from threading import Thread
 5 from time import sleep
 6 
 7 class Producer(Thread):
 8     def run(self):
 9         count=0
10         while True:
11             if queue.qsize()<1000:
12                 for i in range(100):
13                     count+=1
14                     msg='生产成品'+str(count)
15                     queue.put(msg)
16                     print(msg)
17             sleep(0.5)
18 
19 class Consumer(Thread):
20     def run(self):
21         while True:
22             if queue.qsize()>100:
23                 for i in range(3):
24                     msg=self.name+'消费了'+queue.get()
25                     print(msg)
26             sleep(1)
27 
28 if __name__ == '__main__':
29     queue = Queue()
30     for i in range(500):
31         queue.put('初始产品'+str(i))
32     for i in range(2):
33         p=Producer()
34         p.start()
35     for i in range(5):
36         p=Consumer()
37         p.start()

 

posted on 2019-08-21 22:16  cherry_ning  阅读(229)  评论(0)    收藏  举报

导航