python 加快程序運行問題

問題描述

假設：

def get(url): #這里是get請求 return urlfor i in urls: get(i)#這里采用循環去調用請求#這樣速度好像比較慢，有什么方法可以#當多個請求時，也可以快速完成程序

謝謝了

問題解答

>>> from eventor import Eventor>>> urllist = ['https://a.com', ....]>>> def get(url):# 網絡IO耗時return url>>> e = Eventor(threadcount=3, taskunitcount=3, func=get, interval=1)>>> result = e.run_with_tasklist(urllist)>>> print(result)

自己根據需求選擇 多核多進程，還是多線程，協程加快處理。

詳情移步：https://github.com/kute/eventor

后續再 加進 async await，celery worker等

幾個方法，并且可以結合使用

coroutine

multiprocess

multithread

celery worker

最簡單的改造就是用multiprocessing.dummy 執行多線程任務，可以查一下，設置好線程數量，然后對程序不需要太大改造，大體就能用。