queuequeue是python标准库中的线程安全的队列(fifo)实现,提供了一个适用于多线程编程的先进先出的数据结构,即队列,用来在生产者和消费者线程之间的信息传递
基本fifo队列class queue.queue(maxsize=0)
fifo即first in first out,先进先出。queue提供了一个基本的fifo容器,使用方法很简单,maxsize是个整数,指明了队列中能存放的数据个数的上限。一旦达到上限,插入会导致阻塞,直到队列中的数据被消费掉。如果maxsize小于或者等于0,队列大小没有限制。
举个栗子:
1 import queue2 3 q = queue.queue()4 5 for i in range(5):6 q.put(i)7 8 while not q.empty():9 print q.get()
输出:
01
2
3
4
lifo队列class queue.lifoqueue(maxsize=0)
lifo即last in first out,后进先出。与栈的类似,使用也很简单,maxsize用法同上
再举个栗子:
1 import queue2 3 q = queue.lifoqueue()4 5 for i in range(5):6 q.put(i)7 8 while not q.empty():9 print q.get()
输出:
4
3
2
10
可以看到仅仅是将queue.quenu类替换为queue.lifiqueue类
优先级队列class queue.priorityqueue(maxsize=0)
构造一个优先队列。maxsize用法同上。
import queueimport threadingclass job(object):def __init__(self, priority, description):
self.priority = priority
self.description = descriptionprint 'job:',descriptionreturndef __cmp__(self, other):return cmp(self.priority, other.priority)
q = queue.priorityqueue()
q.put(job(3, 'level 3 job'))
q.put(job(10, 'level 10 job'))
q.put(job(1, 'level 1 job'))def process_job(q):while true:
next_job = q.get()print 'for:', next_job.description
q.task_done()
workers = [threading.thread(target=process_job, args=(q,)),
threading.thread(target=process_job, args=(q,))
]for w in workers:
w.setdaemon(true)
w.start()
q.join()
结果
job: level 3 job
job: level 10 job
job: level 1 jobfor: level 1 jobfor: level 3 jobfor: job: level 10 job
一些常用方法task_done()意味着之前入队的一个任务已经完成。由队列的消费者线程调用。每一个get()调用得到一个任务,接下来的task_done()调用告诉队列该任务已经处理完毕。
如果当前一个join()正在阻塞,它将在队列中的所有任务都处理完时恢复执行(即每一个由put()调用入队的任务都有一个对应的task_done()调用)。
join()阻塞调用线程,直到队列中的所有任务被处理掉。
只要有数据被加入队列,未完成的任务数就会增加。当消费者线程调用task_done()(意味着有消费者取得任务并完成任务),未完成的任务数就会减少。当未完成的任务数降到0,join()解除阻塞。
put(item[, block[, timeout]])将item放入队列中。
如果可选的参数block为true且timeout为空对象(默认的情况,阻塞调用,无超时)。
如果timeout是个正整数,阻塞调用进程最多timeout秒,如果一直无空空间可用,抛出full异常(带超时的阻塞调用)。
如果block为false,如果有空闲空间可用将数据放入队列,否则立即抛出full异常
其非阻塞版本为put_nowait等同于put(item, false)
get([block[, timeout]])从队列中移除并返回一个数据。block跟timeout参数同put方法
其非阻塞方法为`get_nowait()`相当与get(false)
empty()如果队列为空,返回true,反之返回false
以上就是python的queue模块详解的详细内容。