首頁  >  文章  >  後端開發  >  python執行緒池threadpool使用篇

python執行緒池threadpool使用篇

不言
不言原創
2018-05-02 14:29:342728瀏覽

這篇文章主要為大家詳細介紹了python線程池threadpool的使用方法,具有一定的參考價值,有興趣的小伙伴們可以參考一下

最近在做一個視頻設備管理的項目,設備包括(攝影機,DVR,NVR等),包括設備資訊補全,設備狀態推送,設備流位址推送等,如果同時導入的設備數量較多,如果使用單線程進行設備檢測,那麼由於設備數量較多,會帶來較大的延時,因此考慮多執行緒處理此問題。

可以使用python語言自行實作執行緒池,或者可以使用第三方套件threadpool執行緒池包,本主題主要介紹threadpool的使用以及其裡面的具體實作。

1、安裝

使用安裝:

#
pip installthreadpool

##2 、使用

   (1)引入threadpool模組

   (2)定義執行緒函數
   (3)建立執行緒池threadpool.ThreadPool()
   (4)建立需要執行緒池threadpool.ThreadPool()
   (4)建立需要執行緒池處理的任務即threadpool.makeRequests()
   (5)將建立的多個任務put到執行緒池中,threadpool.putRequest
   (6)等到所有任務處理完畢theadpool.pool()

import threadpool 
def ThreadFun(arg1,arg2): 
 pass 
def main(): 
 device_list=[object1,object2,object3......,objectn]#需要处理的设备个数 
 task_pool=threadpool.ThreadPool(8)#8是线程池中线程的个数 
 request_list=[]#存放任务列表 
 #首先构造任务列表 
 for device in device_list: 
 request_list.append(threadpool.makeRequests(ThreadFun,[((device, ), {})])) 
 #将每个任务放到线程池中,等待线程池中线程各自读取任务,然后进行处理,使用了map函数,不了解的可以去了解一下。 
 map(task_pool.putRequest,request_list) 
 #等待所有任务处理完成,则返回,如果没有处理完,则一直阻塞 
 task_pool.poll() 
if __name__=="__main__": 
 main()

上面就是一個具體的執行緒池的使用流程
threadpool具體的定義如下:

class ThreadPool: 
 """A thread pool, distributing work requests and collecting results. 
 
 See the module docstring for more information. 
 
 """ 
 def __init__(self, num_workers, q_size=0, resq_size=0, poll_timeout=5): 
 pass 
 def createWorkers(self, num_workers, poll_timeout=5): 
 pass 
 def dismissWorkers(self, num_workers, do_join=False): 
 pass 
 def joinAllDismissedWorkers(self): 
 pass 
 def putRequest(self, request, block=True, timeout=None): 
 pass 
 def poll(self, block=False): 
 pass 
 def wait(self): 
 pass

下一節會詳細介紹上面的整個流程以及每個函數:python 執行緒池threadpool(實作篇)

#相關推薦:

python執行緒池threadpool的實作

#

以上是python執行緒池threadpool使用篇的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述:
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn