библиотека запросов-фьючерсов: как
Мне нужно получить данные с 40000 URL-адресов.
Нужные мне данные нужно поместить в словарь.
Если бы я использовал библиотеку запросов по умолчанию, код выглядел бы примерно так:
mydict = {}
import requests
import re
for url in url_list:
response = requests.get(url)
string = response.text
result = re.findall('some_regex', string)
mydict[url] = result
Однако я не понимаю синтаксис библиотеки запросов-фьючерсов.
Я прочитал руководства Росс на его официальной странице на github, но не могу понять, как решить мою проблему.
Не могли бы вы объяснить мне, как мне написать похожий многократный запрос с использованием request-futures и с какими основными полезными параметрами оптимизации мне следует работать?
Заранее большое спасибо.