文章詳情頁
python 加快程序運行問題
瀏覽:126日期:2022-07-26 13:50:42
問題描述
假設:
def get(url): #這里是get請求 return urlfor i in urls: get(i)#這里采用循環去調用請求#這樣速度好像比較慢,有什么方法可以#當多個請求時,也可以快速完成程序
謝謝了
問題解答
回答1:>>> from eventor import Eventor>>> urllist = ['https://a.com', ....]>>> def get(url):# 網絡IO耗時return url>>> e = Eventor(threadcount=3, taskunitcount=3, func=get, interval=1)>>> result = e.run_with_tasklist(urllist)>>> print(result)
自己根據需求選擇 多核多進程,還是多線程,協程加快處理。
詳情移步:https://github.com/kute/eventor
后續再 加進 async await,celery worker等
回答2:幾個方法,并且可以結合使用
coroutine
multiprocess
multithread
celery worker
回答3:最簡單的改造就是用multiprocessing.dummy 執行多線程任務,可以查一下,設置好線程數量,然后對程序不需要太大改造,大體就能用。
相關文章:
排行榜
