Python基于進(jìn)程池實(shí)現(xiàn)多進(jìn)程過(guò)程解析
1、注意:pool必須在 if __name__ == ’__main__’ 下面運(yùn)行,不然會(huì)報(bào)錯(cuò)
2、多進(jìn)程內(nèi)出現(xiàn)錯(cuò)誤會(huì)直接跳過(guò)該進(jìn)程,并且默認(rèn)不會(huì)打印錯(cuò)誤信息
3、if__name__下面的數(shù)據(jù)需要通過(guò)參數(shù)傳入主函數(shù)里面,不然主函數(shù)獲取不到該數(shù)據(jù)值而報(bào)錯(cuò)。
4、若不通過(guò)傳參形式傳入數(shù)據(jù),可以定義全局變量。但是全局變量的值不能在多進(jìn)程里面進(jìn)行修改。
代碼如下
from multiprocessing import Pool # 進(jìn)程池,用于多進(jìn)程import os # 用于獲取當(dāng)前執(zhí)行的文件名import timeimport traceback # 用于捕獲異常import sys # 用于捕獲異常def main_func(i): # 多進(jìn)程運(yùn)行的函數(shù) try: # 多進(jìn)程中發(fā)生異常是不會(huì)打印錯(cuò)誤信息,并且當(dāng)前進(jìn)程會(huì)直接跳過(guò),所以異常需要自行捕獲 rand_time = random.randint(1, 3) # 隨機(jī)產(chǎn)生1~3的整數(shù) time.sleep(rand_time ) print(i) except: current_filename = str(os.path.basename(sys.argv[0]))[:-3] # 獲取當(dāng)前文件名稱 cur_err_filname = current_filename + ’_error.txt’ error_info = sys.exc_info() # 打印異常 with open(f’{cur_err_filname }’, ’a’) as f: error_str = f’{i}:ERROR OCCURRED,{time.strftime('%Y-%m-%d %H:%M:%S')}:n {error_info[0]}: {error_info[1]}’ # 記錄當(dāng)前進(jìn)程特征值,錯(cuò)誤發(fā)生時(shí)間 ,錯(cuò)誤類型,錯(cuò)誤概述 print(error_str, file=f) # 通過(guò)打印方式寫入文件 traceback.print_tb(error_info[2], file=f) # 錯(cuò)誤細(xì)節(jié)描述(包括bug的代碼位置) f.write(f'{’=’ * 50}n') # 分行if __name__ == ’__main__’: # 必須在此語(yǔ)句下面運(yùn)行,不然會(huì)報(bào)錯(cuò) pool = Pool(5) # 定義進(jìn)程數(shù)量 for i in range(20): pool.apply_async(main_func, (i, )) # 調(diào)用函數(shù)執(zhí)行多進(jìn)程 pool.close() # 關(guān)閉進(jìn)程池 pool.join() # 阻塞進(jìn)程,此兩部不能少,保證多進(jìn)程正常運(yùn)行
以上就是本文的全部?jī)?nèi)容,希望對(duì)大家的學(xué)習(xí)有所幫助,也希望大家多多支持好吧啦網(wǎng)。
相關(guān)文章:
1. JavaScript實(shí)現(xiàn)組件化和模塊化方法詳解2. asp.net core項(xiàng)目授權(quán)流程詳解3. UDDI FAQs4. ASP基礎(chǔ)入門第三篇(ASP腳本基礎(chǔ))5. html清除浮動(dòng)的6種方法示例6. JSP之表單提交get和post的區(qū)別詳解及實(shí)例7. ASP.NET MVC通過(guò)勾選checkbox更改select的內(nèi)容8. css進(jìn)階學(xué)習(xí) 選擇符9. PHP循環(huán)與分支知識(shí)點(diǎn)梳理10. PHP字符串前后字符或空格刪除方法介紹
