Описание тега python-aiofiles

Вопросы с тегом
NoneAiofiles is a python library that is used to handle the local disk files present in asyncio applications. Use this tag for questions related to the python library only. Do not use the tag for APL I/O files.
0 ответов

Асинхронное программирование для вычисления хэшей файлов

Я пытаюсь вычислить хэш для файлов, чтобы проверить, были ли внесены какие-либо изменения. У меня есть Gui и некоторые другие наблюдатели, работающие в цикле событий. Итак, я решил вычислить хэш файлов [md5/Sha1, который когда-либо быстрее] асинхрон…
20 июн '19 в 15:25
1 ответ

Разбор большого количества HTML-файлов с помощью asyncio aiofiles и парсинг их в pandas DataFrame

У меня есть около 40 000 файлов HTML на диске и функция, которая анализирует HTML с помощью Beautiful Soup и возвращает словарь для каждого HTML. Во время чтения / разбора я добавляю все словари в список и в конце создаю pandas DataFrame. Все работа…
19 дек '19 в 11:32
1 ответ

Ищу объяснения преимуществ async with/for

Я новичок в asyncio. Недавно я наткнулся на AIOFiles (https://github.com/Tinche/aiofiles) и увидел в документации, что он поддерживает "async with" и "async for". Я хотел узнать об этом, но об этом не так много хорошего, кроме PEP 492, в котором не …
06 ноя '19 в 07:20
1 ответ

Чтение из txt файла и выполнение команды os

То, что я хочу достичь, - это прочитать IP/ домен из файла TXT и выполнить команду импорта ОС, а затем добавить IP/ домен при пинге. Однако проблема в том, что по какой-то причине он помещает точку в конце IP/ домена, который он читал из файла TXT, …
21 ноя '19 в 03:02
1 ответ

Как ограничить количество одновременных операций чтения / записи с помощью файлов AI?

Моя программа одновременно загружала около 10 миллионов фрагментов данных с помощью aiohttp, а затем записывала данные примерно в 4000 файлов на диск. Я использую библиотеку aiofiles, потому что хочу, чтобы моя программа выполняла и другие действия …
13 дек '19 в 17:49
0 ответов

написать модульный тест для файлов async aiohttp и aio

Я новичок в asyncio. Я использую файлы aiohttp и aiofiles для загрузки изображений. как написать модульные тесты для них обоих. class ImageDownloader: def __init__(self, folder_path: str): self.folder_path = folder_path async def async_download_imag…
31 авг '20 в 08:32
2 ответа

Как преобразовать много HTML в JSON с помощью asyncio в Python

Это моя первая попытка использовать asyncio в Python. Задача - преобразовать 40000+ htmls в jsons. Использование синхронного цикла for занимает около 3,5 минут. Мне интересно увидеть прирост производительности с помощью asyncio. Я использую следующи…
01 окт '19 в 00:44
1 ответ

асинхронная версия работает медленнее, чем неасинхронная версия

Моя программа делает следующее: Принимает папку с файлами.txt Для каждого файла: 2.1. прочтите файл 2.2 сортирует содержимое как список и помещает его в главный список Я сделал это без async/await, и это статистика времени real 0m0.036s user 0m0.018…
02 фев '20 в 19:44
0 ответов

При каких обстоятельствах полезно асинхронно читать один файл?

Я новичок в python AIO, пытаюсь научиться. Я смотрю на пример aiofiles: async with aiofiles.open('filename') as f: async for line in f: и вам интересно, при каких обстоятельствах имеет смысл асинхронно читать один файл? Я понимаю, что операции ввода…
07 апр '20 в 03:30
1 ответ

ожидание aiofiles.os.remove() возвращает TypeError: объект NoneType нельзя использовать в выражении await

Я пытаюсь асинхронно удалить файл из локального каталога; однако я получаю следующую ошибку:объект NoneType нельзя использовать в выражении 'await' () Я использую файлы версий 0.5.0 и Python 3.6.5. мой код такой же простой: async def delete_local_fi…
19 апр '20 в 14:09
1 ответ

Проблема с записью файла по определенному пути

Пытаюсь записать файл на диск, указав путь к папке для сохранения. Но получаю ошибку чтения файла по указанному пути. FileNotFoundError: [Errno 2] No such file or directory: '/home/jekson/Projects/img-text-reco/static/product_images/24f2a9d0372a49bc…
29 июл '20 в 11:31
1 ответ

Как мне асинхронно обработать много файлов с помощью aiofiles?

У меня есть список, который я хотел бы написать, data, по одному файлу для каждого элемента, например: for i,chunk in enumerate(data): fname = ROOT / f'{i}.in' with open(fname, "wb") as fout: dill.dump(chunk, fout) Поскольку список данных может быть…
15 янв '20 в 01:44
2 ответа

Модуль Python aiohttp: неоднозначный атрибут .content

Вот небольшой фрагмент кода: import aiohttp import aiofiles async def fetch(url): # starting a session async with aiohttp.ClientSession() as session: # starting a get request async with session.get(url) as response: # getting response content conten…
17 окт '20 в 00:13
0 ответов

httpx, зависает рекурсивная задача asyncio

Я пытаюсь изучить asyncio с помощью python, я сделал асинхронный веб-скребок с httpx, aiohttp мне было сложно. import aiofiles import asyncio import httpx from lxml import html async def fetchPage(url): try: response = await session.get(url) respons…
04 дек '20 в 18:06
2 ответа

Как я могу загружать файлы через aiohttp, используя ответ на запрос на получение?

Для начала я пишу асинхронную оболочку для WordPress REST API. У меня есть сайт Wordpress, размещенный на Bluehost. Я работаю с конечной точкой для загрузки мультимедиа (изображений). Мне удалось загрузить изображение, но я хотел бы внести два измен…
07 ноя '20 в 08:18
3 ответа

Протокол срока службы ASGI не поддерживается

У меня есть асинхронный код, работающий на fastapi и aiofiles, я пытаюсь загрузить и сохранить свою информацию из файла.json, но каждый раз, когда я закрываю программу, он сохраняет только ключи dict и показывает мне "срок жизни ASGI ' протокол появ…
24 окт '20 в 13:17
0 ответов

aiofiles python отправляет файл кусками через поток

Я пытаюсь отправить файл с помощью aiofiles через асинхронные сокеты, файл отправляется, но отправка не останавливается, пока я не убью сервер, не уверен, что я здесь делаю неправильно. Я пробовал несколько примеров, но не повезло с ними, похоже, не…
04 дек '20 в 05:36
1 ответ

aiofiles - Удаляет файлы в папке, удовлетворяющей критериям

У меня есть папка с примерно 50 000 HTML-файлов. Я пытаюсь написать сценарий, который открывает файл, и если заголовок содержит определенную строку, файл следует удалить. Это моя попытка: import aiofiles import glob from natsort import natsorted imp…
05 апр '21 в 17:59
1 ответ

следующая строка не работает при правильном синтаксисе

f.write(str(Path)) f.write("\n") f.write(str(Monthly)) путь - это строка, а «Месяц» - это дата. Я могу вставить все в текстовый файл, но не получаю желаемого результата: Результат, который я хочу, должен быть D:\python 2021-04-08 Но результат, кото…
08 апр '21 в 13:36
1 ответ

async file copy - почему файловый дескриптор плохой?

Хотел бы реализовать код Python для чтения и записи (т.е. копирования) файла. Целью является одновременное чтение и запись, что сокращает время выполнения копии файла. Это обучающее упражнение для меня, чтобы познакомиться с парадигмой async / await…
13 май '21 в 23:44