Python 中的 queue 模塊隊列詳解;隊列如何使用——如何處理信息在多個線程間安全交換的多線程程序?

queue 模塊即隊列,特別適合處理信息在多個線程間安全交換的多線程程序中。下面我們對 queue 模塊進行一個詳細的使用介紹。

1 queue 模塊定義的類和異常

queue 模塊定義了以下四種不同類型的隊列,它們之間的區別在于數據入隊列之后出隊列的順序不同。

1.1 queue.Queue(maxsize=0)

先進先出(First In First Out: FIFO)隊列,最早進入隊列的數據擁有出隊列的優先權,就像看電影入場時排隊一樣,排在隊伍前頭的優先進入電影院。

入參 maxsize 是一個整數,用于設置隊列的最大長度。一旦隊列達到上限,插入數據將會被阻塞,直到有數據出隊列之后才可以繼續插入。如果 maxsize 設置為小于或等于零,則隊列的長度沒有限制。

示例如下:

import queue
q = queue.Queue()  # 創建 Queue 隊列
for i in range(3):q.put(i)  # 在隊列中依次插入0、1、2元素
for i in range(3):print(q.get())  # 依次從隊列中取出插入的元素,數據元素輸出順序為0、1、2

1.2 queue.LifoQueue(maxsize=0)

后進先出(Last In First Out: LIFO)隊列,最后進入隊列的數據擁有出隊列的優先權,就像棧一樣。

入參 maxsize 與先進先出隊列的定義一樣。

示例如下:

import queue
q = queue.LifoQueue()  # 創建 LifoQueue 隊列
for i in range(3):q.put(i)  # 在隊列中依次插入0、1、2元素
for i in range(3):print(q.get())  # 依次從隊列中取出插入的元素,數據元素輸出順序為2、1、0

1.3 PriorityQueue(maxsize=0)

優先級隊列,比較隊列中每個數據的大小,值最小的數據擁有出隊列的優先權。數據一般以元組的形式插入,典型形式為(priority_number, data)。如果隊列中的數據沒有可比性,那么數據將被包裝在一個類中,忽略數據值,僅僅比較優先級數字。

入參 maxsize 與先進先出隊列的定義一樣。

示例如下:

import queue
q = queue.PriorityQueue()  # 創建 PriorityQueue 隊列
data1 = (1, 'python')
data2 = (2, '-')
data3 = (3, '100')
style = (data2, data3, data1)
for i in style:q.put(i)  # 在隊列中依次插入元素 data2、data3、data1
for i in range(3):print(q.get())  # 依次從隊列中取出插入的元素,數據元素輸出順序為 data1、data2、data3

1.4 queue.SimpleQueue

先進先出類型的簡單隊列,沒有大小限制。由于它是簡單隊列,相比于 Queue 隊列會缺少一些高級功能,下面第2-3小節將會介紹。

示例如下:

import queue
q = queue.SimpleQueue()  # 創建 SimpleQueue 隊列
for i in range(3):q.put(i)  # 在隊列中依次插入0、1、2元素
for i in range(3):print(q.get())  # 依次從隊列中取出插入的元素,數據元素輸出順序為0、1、2

1.5 queue.Empty 異常

當隊列中沒有數據元素時,取出隊列中的數據會引發 queue.Empty 異常,主要是不正當使用 get() 和 get_nowait() 引起的。

示例如下:

import queue
try:q = queue.Queue(3)  # 設置隊列上限為3q.put('python')  # 在隊列中插入字符串 'python'q.put('-') # 在隊列中插入字符串 '-'q.put('100') # 在隊列中插入字符串 '100'for i in range(4):  # 從隊列中取數據,取出次數為4次,引發 queue.Empty 異常print(q.get(block=False))
except queue.Empty:print('queue.Empty')

1.6 queue.Full 異常

當隊列數據元素容量達到上限時,繼續往隊列中放入數據會引發 queue.Empty 異常,主要是不正當使用 put() 和 put_nowait() 引起的。

示例如下:

import queue
try:q = queue.Queue(3)  # 設置隊列上限為3q.put('python')  # 在隊列中插入字符串 'python'q.put('-') # 在隊列中插入字符串 '-'q.put('100') # 在隊列中插入字符串 '100'q.put('stay hungry, stay foolish', block=False)  # 隊列已滿,繼續往隊列中放入數據,引發 queue.Full 異常
except queue.Full:print('queue.Full')

2 Queue、LifoQueue、PriorityQueue 和 SimpleQueue 對象的基本使用方法

Queue、LifoQueue、PriorityQueue 和 SimpleQueue 四種隊列定義的對象均提供了以下函數使用方法,下面以 Queue 隊列為例進行介紹。

2.1 Queue.qsize()

返回隊列中數據元素的個數。

示例如下:

import queue
q = queue.Queue()
q.put('python-100')  # 在隊列中插入元素 'python-100'
print(q.qsize())  # 輸出隊列中元素個數為1

2.2 Queue.empty()

如果隊列為空,返回 True,否則返回 False。

示例如下:

import queue
q = queue.Queue()
print(q.empty())  # 對列為空,返回 True
q.put('python-100')  # 在隊列中插入元素 'python-100'
print(q.empty())  # 對列不為空,返回 False

2.3 Queue.full()

如果隊列中元素個數達到上限,返回 True,否則返回 False。

示例如下:

import queue
q = queue.Queue(3)  # 定義一個長度為3的隊列
print(q.full())  # 元素個數未達到上限,返回 False
q.put('python')  # 在隊列中插入字符串 'python'
q.put('-') # 在隊列中插入字符串 '-'
q.put('100') # 在隊列中插入字符串 '100'
print(q.full())  # 元素個數達到上限,返回 True

2.4 Queue.put(item, block=True, timeout=None)

item,放入隊列中的數據元素。
block,當隊列中元素個數達到上限繼續往里放數據時:如果 block=False,直接引發 queue.Full 異常;如果 block=True,且 timeout=None,則一直等待直到有數據出隊列后可以放入數據;如果 block=True,且 timeout=N,N 為某一正整數時,則等待 N 秒,如果隊列中還沒有位置放入數據就引發 queue.Full 異常。
timeout,設置超時時間。
示例如下:

import queue
try:q = queue.Queue(2)  # 設置隊列上限為2q.put('python')  # 在隊列中插入字符串 'python'q.put('-') # 在隊列中插入字符串 '-'q.put('100', block = True, timeout = 5) # 隊列已滿,繼續在隊列中插入字符串 '100',等待5秒后會引發 queue.Full 異常
except queue.Full:print('queue.Full')

2.5 Queue.put_nowait(item)

相當于 Queue.put(item, block=False),當隊列中元素個數達到上限繼續往里放數據時直接引發 queue.Full 異常。

import queue
try:q = queue.Queue(2)  # 設置隊列上限為2q.put_nowait('python')  # 在隊列中插入字符串 'python'q.put_nowait('-') # 在隊列中插入字符串 '-'q.put_nowait('100') # 隊列已滿,繼續在隊列中插入字符串 '100',直接引發 queue.Full 異常
except queue.Full:print('queue.Full')

2.6 Queue.get(block=True, timeout=None)

從隊列中取出數據并返回該數據內容。

block,當隊列中沒有數據元素繼續取數據時:如果 block=False,直接引發 queue.Empty 異常;如果 block=True,且 timeout=None,則一直等待直到有數據入隊列后可以取出數據;如果 block=True,且 timeout=N,N 為某一正整數時,則等待 N 秒,如果隊列中還沒有數據放入的話就引發 queue.Empty 異常。
timeout,設置超時時間。
示例如下:

import queue
try:q = queue.Queue()q.get(block = True, timeout = 5) # 隊列為空,往隊列中取數據時,等待5秒后會引發 queue.Empty 異常
except queue.Empty:print('queue.Empty')

2.7 Queue.get_nowait()

相當于 Queue.get(block=False)block,當隊列中沒有數據元素繼續取數據時直接引發 queue.Empty 異常。

示例如下:

import queue
try:q = queue.Queue()q.get_nowait() # 隊列為空,往隊列中取數據時直接引發 queue.Empty 異常
except queue.Empty:print('queue.Empty')

3 Queue、LifoQueue 和 PriorityQueue 對象的高級使用方法

SimpleQueue 是 Python 3.7 版本中新加入的特性,與 Queue、LifoQueue 和 PriorityQueue 三種隊列相比缺少了 task_done 和 join 的高級使用方法,所以才會取名叫 Simple 了,下面介紹一下 task_done 和 join 的使用方法。

task_done,表示隊列內的數據元素已經被取出,即每個 get 用于獲取一個數據元素, 后續調用 task_done 告訴隊列,該數據的處理已經完成。如果被調用的次數多于放入隊列中的元素個數,將引發 ValueError 異常。
join,一直阻塞直到隊列中的所有數據元素都被取出和執行,只要有元素添加到 queue 中就會增加。當未完成任務的計數等于0,join 就不會阻塞。
示例如下:

import queue
q = queue.Queue()
q.put('python')
q.put('-')
q.put('100')
for i in range(3):print(q.get())q.task_done()  # 如果不執行 task_done,join 會一直處于阻塞狀態,等待 task_done 告知它數據的處理已經完成
q.join()

下面是一個經典示例,生產者和消費者線程分別生產數據和消費數據,先生產后消費。采用 task_done 和 join 確保處理信息在多個線程間安全交換,生產者生產的數據能夠全部被消費者消費掉。

from queue import Queue
import random
import threading
import time#生產者線程
class Producer(threading.Thread):def __init__(self, t_name, queue):threading.Thread.__init__(self, name=t_name)self.data=queuedef run(self):for i in range(5):print ("%s: %s is producing %d to the queue!" %(time.ctime(), self.getName(), i))self.data.put(i)  # 將生產的數據放入隊列time.sleep(random.randrange(10)/5)print ("%s: %s finished!" %(time.ctime(), self.getName()))#消費者線程
class Consumer(threading.Thread):def __init__(self, t_name, queue):threading.Thread.__init__(self, name=t_name)self.data=queuedef run(self):for i in range(5):val = self.data.get()  # 拿出已經生產好的數據print ("%s: %s is consuming. %d in the queue is consumed!" %(time.ctime(), self.getName(), val))time.sleep(random.randrange(5))self.data.task_done() # 告訴隊列有關這個數據的任務已經處理完成print ("%s: %s finished!" %(time.ctime(), self.getName()))#主線程
def main():queue = Queue()producer = Producer('Pro.', queue)consumer = Consumer('Con.', queue)producer.start()consumer.start()queue.join()  # 阻塞,直到生產者生產的數據全都被消費掉producer.join() # 等待生產者線程結束consumer.join() # 等待消費者線程結束print ('All threads terminate!')if __name__ == '__main__':main()

4 總結

本節給大家介紹了 Python 的 queue 模塊,為 Python 工程師對該模塊的使用提供了支撐,讓大家對 queue 模塊的相關概念和使用有一個初步的了解。

本文來自互聯網用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。
如若轉載,請注明出處:http://www.pswp.cn/news/210425.shtml
繁體地址,請注明出處:http://hk.pswp.cn/news/210425.shtml
英文地址,請注明出處:http://en.pswp.cn/news/210425.shtml

如若內容造成侵權/違法違規/事實不符,請聯系多彩編程網進行投訴反饋email:809451989@qq.com,一經查實,立即刪除!

相關文章

cmake編譯數據庫

在使用CMake進行編譯時,如果你想生成編譯數據庫,你可以定義CMAKE_EXPORT_COMPILE_COMMANDS選項。具體的命令如下: cmake -DCMAKE_EXPORT_COMPILE_COMMANDS1或者在CMakeLists.txt顯示的使能配置 set(CMAKE_EXPORT_COMPILE_COMMANDS ON)這將會…

游戲玩家升級不傷手之選,光威龍武系列超強性能

得益于國產存儲芯片的崛起,現在的內存條價格太香了。要放在前幾年,購買內存條時都會優先考慮國際一線品牌。隨著內存條行業發生巨變,國產品牌光威GLOWAY,是全球前三的內存模組廠商嘉合勁威旗下品牌,它推出的內存條產品…

Zebec 推出由 Visa、萬事達網絡支持的即時支付卡,加密支付新征程

“Zebec現已推出全新的加密支付卡,該卡由Visa、萬事達網絡支持,具備即時、多鏈、非托管、無需KYC、免費等特性,其能夠通過加密錢包與多條主流公鏈鏈接并直接調用支付,這將是加密支付領域的里程碑事件。” 在2023年的12月8日&#…

C++中的string容器的substr()函數

一、作用 用來截取某段字符串。 二、頭文件 #include<string> 三、參數與用法 形式&#xff1a;s.substr(pos, len) 第一個參數是想要截取的字符串初始位置&#xff0c;第二個參數是截取字符串長度。 直接來說&#xff0c;就是從s[pos]開始截一個長度為len的子串。…

【python交互界面】實現動態觀察圖像在給定HSV范圍的區域顯示

HSV顏色空間 與RGB顏色空間相比&#xff0c;HSV顏色空間更適合進行顏色分析和提取特定顏色的目標。在HSV空間中&#xff0c;顏色信息被分布在不同的通道上&#xff0c;使我們能夠更準確地定義顏色的范圍&#xff0c;并使用閾值操作輕松地分離出我們感興趣的區域部分。 HSV三個通…

二叉樹查找值為x的結點(C語言)

目錄 前言 查找值為x的結點 返回值為指針 返回值為布爾類型 整體代碼 前言 在二叉樹結點個數、葉子結點個數、樹的高度、第k層結點個數的計算&#xff08;C語言&#xff09;中&#xff0c;我們解決了關于二叉樹的部分問題&#xff0c;但是還有一個問題我們放在本篇解決。 …

數據集成和人工智能驅動的見解

數字時代使數據成為人們關注的焦點&#xff0c;將其從單純的二進制序列轉變為有價值的組織資產。隨著企業越來越多地轉向數據驅動戰略&#xff0c;數據管理的復雜性也隨之增加。當前的任務不僅僅是存儲甚至收集數據&#xff0c;而是將其轉化為可操作的情報。本博客旨在剖析尋求…

Python中的selenium安裝的步驟(瀏覽器自動化測試框架)

一、前言 我們今天要安裝的selenium 就是瀏覽器自動化測試框架&#xff0c;是一個用于Web應用程序的測試工具&#xff0c;就是模擬用戶操作。支持的瀏覽器包括Chrome&#xff0c;IE&#xff0c;Mozilla Firefox&#xff0c;Safari&#xff0c;Opera等。今天我們以Chrome為例講…

STM32單片機項目實例:基于TouchGFX的智能手表設計(2)UI交互邏輯的設計

STM32單片機項目實例&#xff1a;基于TouchGFX的智能手表設計&#xff08;2&#xff09;UI交互邏輯的設計 目錄 一、UI交互邏輯的設計 1.1 硬件平臺的資源 1.2 界面切換功能 ???????1.3 表盤界面 1.4 運動界面 ???????1.6 設置界面 ???????1.7 應…

不一樣的年會彩瞳推薦,綺芙莉多款彩瞳彰顯個性

臨近年底&#xff0c;各種公司年會、跨年晚會活動也逐漸排上日程&#xff0c;出席這種正式場合&#xff0c;每個人都有自己的“殺手锏”&#xff0c;從發型妝容到穿搭都是變美小細節&#xff0c;作為心靈之窗的雙眸&#xff0c;更需要一副彩瞳來提升我們的眼妝質感&#xff0c;…

微前端 ---- wujie-vue3 原理

目錄 前言 設置子應用? 預加載? 啟動子應用? 封裝 1.創建文件 2.安裝依賴 3.編寫組件 4.配置打包規則 5.執行打包命令 swc技術 SWC Babel Babel VS SWC 更改使用 swc 解析 使用swc 完成 esm 模式 &#xff08;export--import&#xff09; 發布到npm 更改p…

【SpringBoot】解析Springboot事件機制,事件發布和監聽

解析Springboot事件機制&#xff0c;事件發布和監聽 一、Spring的事件是什么二、使用步驟2.1 依賴處理2.2 定義事件實體類2.3 定義事件監聽類2.4 事件發布 三、異步調用3.1 啟用異步調用3.2 監聽器方法上添加 Async 注解 一、Spring的事件是什么 Spring的事件監聽&#xff08;…

持續集成交付CICD:使用Jenkins插件上傳Nexus制品

目錄 一、實驗 1.使用Jenkins插件上傳Nexus制品 一、實驗 1.使用Jenkins插件上傳Nexus制品 &#xff08;1&#xff09;Jenkins安裝插件Nexus Artifact Uploader &#xff08;2&#xff09;添加憑據 &#xff08;3&#xff09;使用片段生成器生成DSL &#xff08;4&#xf…

基于Java物業管理系統

基于Java物業管理系統 功能需求 1、房產信息管理&#xff1a;系統需要提供房產信息管理功能&#xff0c;包括房產的基本信息、租賃狀態、業主信息等。 2、報修管理&#xff1a;系統需要提供報修管理功能&#xff0c;業主可以通過系統提交報修申請&#xff0c;物業管理人員可…

docke網絡之bridge、host、none

一、bridge網絡 1.創建一個測試容器 [rootlocalhost ~]# docker run -d -it --name busybox_1 busybox /bin/sh -c "while true;do sleep 3600;done" 03b308c847edd23f21ba69afb825d92f7aaeb05b1ff4431dd47ccee439a0361a 2.查看當前機器docker有哪些網絡 [rootlocal…

C++ 訪問限定符

目錄 訪問修飾符概述 protected在類的內部和派生類中訪問調用 private在類的內部訪問和調用 訪問修飾符概述 在C中&#xff0c;有三個主要的訪問修飾符&#xff1a;public、private和protected。這些修飾符用于控制類的成員&#xff08;變量和函數&#xff09;的訪問權限。…

2023年9月8日 Go生態洞察:gopls的擴展與Go生態系統的成長

&#x1f337;&#x1f341; 博主貓頭虎&#xff08;&#x1f405;&#x1f43e;&#xff09;帶您 Go to New World?&#x1f341; &#x1f984; 博客首頁——&#x1f405;&#x1f43e;貓頭虎的博客&#x1f390; &#x1f433; 《面試題大全專欄》 &#x1f995; 文章圖文…

AI材料專題報告:AI革命催生新需求國產替代推動新方向

今天分享的AI系列深度研究報告&#xff1a;《AI材料專題報告&#xff1a;AI革命催生新需求國產替代推動新方向》。 &#xff08;報告出品方&#xff1a;光大證券&#xff09; 報告共計&#xff1a;25頁 1、算力需求增長催生 800G 光模塊需求 算力是數字經濟時代新生產力&…

2023年10月9日 Go生態洞察:深入了解類型推斷及其更多細節

&#x1f337;&#x1f341; 博主貓頭虎&#xff08;&#x1f405;&#x1f43e;&#xff09;帶您 Go to New World?&#x1f341; &#x1f984; 博客首頁——&#x1f405;&#x1f43e;貓頭虎的博客&#x1f390; &#x1f433; 《面試題大全專欄》 &#x1f995; 文章圖文…

【C++ Primer Plus學習記錄】if語句

目錄 一、if語句 二、if else語句 三、格式化if else語句 四、if else if else結構 一、if語句 if語句讓程序能夠決定是否應執行特定的語句。 if有兩種格式&#xff1a;if和if else。 if語句的語法與while相似&#xff1a; if(test-condition)statement; 如果test-con…