Описание тега requests-futures
A Python library built for asynchronous HTTP requests.
0
ответов
Параллельные фьючерсы: лучшие настройки для нескольких асинхронных запросов?
Я хочу оптимизировать скрипт, чтобы сделать как можно больше сетевых запросов. Я вижу max_workers может быть ограничено количеством ядер на машине. Означает ли это, что если этот скрипт выполняется на компьютере EC2, например, t2.2xlarge с 8 виртуал…
14 фев '18 в 23:47
0
ответов
Как измерить время запроса с request_futures даже при возникновении исключения?
Я хотел бы измерить время HTTP-запроса с python request_futures даже при возникновении исключения. Хотя elapsed наследуется от оригинала requests Модуль может быть использован для измерения успешного запроса. Но его нельзя использовать для измерения…
01 дек '18 в 09:34
2
ответа
Более быстрый способ делать асинхронные запросы
Я пытаюсь использовать requests-futures библиотека для отправки пакета асинхронных HTTP-запросов и определения наличия или отсутствия определенной строки в содержимом каждой страницы. Вот синхронная версия. Обратите внимание, что реальный сайт, кото…
02 фев '18 в 20:06
4
ответа
Эффективно загружать файлы асинхронно с запросами
Я хочу загружать файлы как можно быстрее с python. Вот мой код import pandas as pd import requests from requests_futures.sessions import FuturesSession import os import pathlib from timeit import default_timer as timer class AsyncDownloader: """Down…
05 фев '18 в 17:49
1
ответ
Фляга питона: асинхронные запросы
В виде колбы я получаю данные через вызов API, и эти данные должны быть переданы во внешний API, который иногда очень медленный. Поэтому я хочу, чтобы представление возвращало положительный код состояния, пока запрос обрабатывается асинхронно. Я про…
01 ноя '18 в 15:07
0
ответов
Как выполнить повторную попытку для ожидающих элементов заголовка, используя futures = session.get(url, headers=header for header in headers1)
Я создаю свой список заголовков, используя эту функцию из файла CSV.
26 май '20 в 14:41
1
ответ
Как использовать continue с запросами-фьючерсами?
У меня есть код, в котором я хочу получать результаты из Интернета. И я хочу, чтобы мой код ждал, если интернет-соединение выйдет из строя. Но когда я попытался выполнить оператор continue внутри цикла for, он дал мне несколько хитрых результатов. И…
09 июл '20 в 06:25
1
ответ
как передать заголовки в async с помощью session.get()
Я хотел бы знать, как передать заголовок в следующем вызове get headers = { 'User-Agent': 'Mozilla' } async def fetch(url, session): async with session.get(url) as response: resp = await response.read() return resp Я попробовал сделать следующее, но…
19 фев '21 в 11:50
0
ответов
библиотека запросов-фьючерсов: как
Мне нужно получить данные с 40000 URL-адресов. Нужные мне данные нужно поместить в словарь. Если бы я использовал библиотеку запросов по умолчанию, код выглядел бы примерно так: mydict = {} import requests import re for url in url_list: response = r…
06 апр '21 в 17:54
0
ответов
По какой причине приложение Flask будет работать нормально, но не сможет загрузить модуль в модульном тесте?
Итак, я создал небольшой API фляги. По сути, обертка для другого API. Я использовал запросы-фьючерсы для асинхронной отправки нескольких вызовов. Я настроил свою виртуальную среду. Все работает именно так, как я задумал. Однако, когда я пытаюсь запу…
19 ноя '21 в 07:46
0
ответов
Быстро получить результат() из request.futures
У меня есть длинный список URL-адресов (несколько тысяч), которые я получаю с помощью FuturesSession. Этот процесс очень быстрый, пока я не дойду до точки, где мне нужен результат FutureSession, т.е. проблема возникает, когда я добавляю к: URLS=[url…
11 янв '22 в 11:57
0
ответов
Kucoin Как получить стакан заявок на фьючерсы от API?
Я пытаюсь найти, как получить книгу заказов на фьючерсы для всех тикеров, я успешно нашел, как получить активные контракты, используя: https://api-futures.kucoin.com/api/v1/contracts/active Я прочитал документацию по API, там написано Получить книгу…
31 май '22 в 18:42
0
ответов
Как сделать так, чтобы модуль request_futures не выдавал ошибку с Heroku?
Когда я пытаюсь развернуть свое приложение Flask на Heroku, я получаю сообщение об ошибке ModuleNotFound Error для request_futures. Я включил его в файл requirements.txt, но проблема все еще возникает. Heroku отлично развертывается без модуля reques…
07 ноя '22 в 22:41