問(wèn)題描述

假設(shè)：

def get(url): #這里是get請(qǐng)求 return urlfor i in urls: get(i)#這里采用循環(huán)去調(diào)用請(qǐng)求#這樣速度好像比較慢，有什么方法可以#當(dāng)多個(gè)請(qǐng)求時(shí)，也可以快速完成程序

謝謝了

問(wèn)題解答

>>> from eventor import Eventor>>> urllist = ['https://a.com', ....]>>> def get(url):# 網(wǎng)絡(luò)IO耗時(shí)return url>>> e = Eventor(threadcount=3, taskunitcount=3, func=get, interval=1)>>> result = e.run_with_tasklist(urllist)>>> print(result)

自己根據(jù)需求選擇 多核多進(jìn)程，還是多線程，協(xié)程加快處理。

詳情移步：https://github.com/kute/eventor

后續(xù)再 加進(jìn) async await，celery worker等

幾個(gè)方法，并且可以結(jié)合使用

coroutine

multiprocess

multithread

celery worker

最簡(jiǎn)單的改造就是用multiprocessing.dummy 執(zhí)行多線程任務(wù)，可以查一下，設(shè)置好線程數(shù)量，然后對(duì)程序不需要太大改造，大體就能用。