
Python中使用Queue和Condition進行線程同步的方法
這篇文章主要介紹了Python中使用Queue模塊和Condition對象進行線程同步的方法,配合threading模塊下的線程編程進行操作的實例,需要的朋友可以參考下
Queue模塊保持線程同步
利用Queue對象先進先出的特性,將每個生產者的數據一次存入隊列,而每個消費者將依次從隊列中取出數據
import threading # 導入threading模塊
import Queue # 導入Queue模塊
class Producer(threading.Thread):# 定義生產者類
def __init__(self,threadname):
threading.Thread.__init__(self,name = threadname)
def run(self):
global queue # 聲明queue為全局變量
queue.put(self.getName()) # 調用put方法將線程名添加到隊列中
print self.getName(),'put ',self.getName(),' to queue'
class Consumer(threading.Thread):# 定義消費者類
def __init__(self,threadname):
threading.Thread.__init__(self,name = threadname)
def run(self):
global queue
print self.getName(),'get ',queue.get(),'from queue'#調用get方法獲取隊列中內容
queue = Queue.Queue() # 生成隊列對象
plist = [] # 生成者對象列表
clist = [] # 消費者對象列表
for i in range(10):
p = Producer('Producer' + str(i))
plist.append(p) # 添加到生產者對象列表
for i in range(10):
c = Consumer('Consumer' + str(i))
clist.append(c) # 添加到消費者對象列表
for i in plist:
i.start() # 運行生產者線程
i.join()
for i in clist:
i.start() # 運行消費者線程
i.join()
######運行結果######
>>> Producer0 put Producer0 to queue
Producer1 put Producer1 to queue
Producer2 put Producer2 to queue
Producer3 put Producer3 to queue
Producer4 put Producer4 to queue
Producer5 put Producer5 to queue
Producer6 put Producer6 to queue
Producer7 put Producer7 to queue
Producer8 put Producer8 to queue
Producer9 put Producer9 to queue
Consumer0 get Producer0 from queue
Consumer1 get Producer1 from queue
Consumer2 get Producer2 from queue
Consumer3 get Producer3 from queue
Consumer4 get Producer4 from queue
Consumer5 get Producer5 from queue
Consumer6 get Producer6 from queue
Consumer7 get Producer7 from queue
Consumer8 get Producer8 from queue
Consumer9 get Producer9 from queue
Condition實現復雜的同步
使用Condition對象可以在某些事件觸發或者達到特定的條件后才處理數據,Condition除了具有Lock對象的acquire方法和release方法外,
還有wait方法,notify方法,notifyAll方法等用于條件處理。
條件變量保持線程同步:threading.Condition()
wait():線程掛起,直到收到一個notify通知才會被喚醒繼續運行
notify():通知其他線程,那些掛起的線程接到這個通知之后會開始運行
notifyAll(): 如果wait狀態線程比較多,notifyAll的作用就是通知所有線程(這個一般用得少)
#coding:utf-8
import threading
import time
cond = threading.Condition()
class kongbaige(threading.Thread):
def __init__(self, cond, diaosiname):
threading.Thread.__init__(self, name = diaosiname)
self.cond = cond
def run(self):
self.cond.acquire() #獲取鎖
print self.getName() + ':一支穿云箭' #空白哥說的第一句話
self.cond.notify() #喚醒其他wait狀態的線程(通知西米哥 讓他說話)
#然后進入wait線程掛起狀態等待notify通知(等西米哥的回復,接下來倆人就開始扯蛋)
self.cond.wait()
print self.getName() + ':山無棱,天地合,乃敢與君絕!'
self.cond.notify()
self.cond.wait()
print self.getName() + ':紫薇?。。?!(此處圖片省略)'
self.cond.notify()
self.cond.wait()
print self.getName() + ':是你'
self.cond.notify()
self.cond.wait()
#這里是空白哥說的最后一段話,接下來就沒有對白了
print self.getName() + ':有錢嗎 借點'
self.cond.notify() #通知西米哥
self.cond.release() #釋放鎖
class ximige(threading.Thread):
def __init__(self, cond, diaosiname):
threading.Thread.__init__(self, name = diaosiname)
self.cond = cond
def run(self):
self.cond.acquire()
self.cond.wait() #線程掛起(等西米哥的notify通知)
print self.getName() +':千軍萬馬來相見'
self.cond.notify() #說完話了notify空白哥wait的線程
self.cond.wait() #線程掛起等待空白哥的notify通知
print self.getName() + ':??煽?,石可爛,激情永不散!'
self.cond.notify()
self.cond.wait()
print self.getName() + ':爾康?。?!(此處圖片省略)'
self.cond.notify()
self.cond.wait()
print self.getName() + ':是我'
self.cond.notify()
self.cond.wait()
#這里是最后一段話,后面空白哥沒接話了 所以說完就釋放鎖 結束線程
print self.getName() + ':滾'
self.cond.release()
kongbai = kongbaige(cond, ' ')
ximi = ximige(cond, '西米')
#尼瑪下面這2個啟動標志是關鍵,雖然是空白哥先開的口,但是不能讓他先啟動,
#因為他先啟動的可能直到發完notify通知了,西米哥才開始啟動,
#西米哥啟動后會一直處于44行的wait狀態,因為空白哥已經發完notify通知了進入wait狀態了,
#而西米哥沒收到
#造成的結果就是2根線程就一直在那掛起,什么都不干,也不扯蛋了
ximi.start()
kongbai.start()
######運行結果######
:一支穿云箭
西米:千軍萬馬來相見
:山無棱,天地合,乃敢與君絕!
西米:??煽?,石可爛,激情永不散!
:紫薇?。。?!(此處圖片省略)
西米:爾康?。?!(此處圖片省略)
:是你
西米:是我
:有錢嗎 借點
西米:滾
數據分析咨詢請掃描二維碼
若不方便掃碼,搜微信號:CDAshujufenxi
CDA數據分析師證書考試體系(更新于2025年05月22日)
2025-05-26解碼數據基因:從數字敏感度到邏輯思維 每當看到超市貨架上商品的排列變化,你是否會聯想到背后的銷售數據波動?三年前在零售行 ...
2025-05-23在本文中,我們將探討 AI 為何能夠加速數據分析、如何在每個步驟中實現數據分析自動化以及使用哪些工具。 數據分析中的AI是什么 ...
2025-05-20當數據遇見人生:我的第一個分析項目 記得三年前接手第一個數據分析項目時,我面對Excel里密密麻麻的銷售數據手足無措。那些跳動 ...
2025-05-20在數字化運營的時代,企業每天都在產生海量數據:用戶點擊行為、商品銷售記錄、廣告投放反饋…… 這些數據就像散落的拼圖,而相 ...
2025-05-19在當今數字化營銷時代,小紅書作為國內領先的社交電商平臺,其銷售數據蘊含著巨大的商業價值。通過對小紅書銷售數據的深入分析, ...
2025-05-16Excel作為最常用的數據分析工具,有沒有什么工具可以幫助我們快速地使用excel表格,只要輕松幾步甚至輸入幾項指令就能搞定呢? ...
2025-05-15數據,如同無形的燃料,驅動著現代社會的運轉。從全球互聯網用戶每天產生的2.5億TB數據,到制造業的傳感器、金融交易 ...
2025-05-15大數據是什么_數據分析師培訓 其實,現在的大數據指的并不僅僅是海量數據,更準確而言是對大數據分析的方法。傳統的數 ...
2025-05-14CDA持證人簡介: 萬木,CDA L1持證人,某電商中廠BI工程師 ,5年數據經驗1年BI內訓師,高級數據分析師,擁有豐富的行業經驗。 ...
2025-05-13CDA持證人簡介: 王明月 ,CDA 數據分析師二級持證人,2年數據產品工作經驗,管理學博士在讀。 學習入口:https://edu.cda.cn/g ...
2025-05-12CDA持證人簡介: 楊貞璽 ,CDA一級持證人,鄭州大學情報學碩士研究生,某上市公司數據分析師。 學習入口:https://edu.cda.cn/g ...
2025-05-09CDA持證人簡介 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度、美團、阿里等 ...
2025-05-07相信很多做數據分析的小伙伴,都接到過一些高階的數據分析需求,實現的過程需要用到一些數據獲取,數據清洗轉換,建模方法等,這 ...
2025-05-06以下的文章內容來源于劉靜老師的專欄,如果您想閱讀專欄《10大業務分析模型突破業務瓶頸》,點擊下方鏈接 https://edu.cda.cn/g ...
2025-04-30CDA持證人簡介: 邱立峰 CDA 數據分析師二級持證人,數字化轉型專家,數據治理專家,高級數據分析師,擁有豐富的行業經驗。 ...
2025-04-29CDA持證人簡介: 程靖 CDA會員大咖,暢銷書《小白學產品》作者,13年頂級互聯網公司產品經理相關經驗,曾在百度,美團,阿里等 ...
2025-04-28CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-27數據分析在當今信息時代發揮著重要作用。單因素方差分析(One-Way ANOVA)是一種關鍵的統計方法,用于比較三個或更多獨立樣本組 ...
2025-04-25CDA持證人簡介: 居瑜 ,CDA一級持證人國企財務經理,13年財務管理運營經驗,在數據分析就業和實踐經驗方面有著豐富的積累和經 ...
2025-04-25