Нужно предложение для обработки файлов с реализацией очереди
У меня есть сценарий, где я получаю данные файла из других источников, это сильно варьируется до 1000 файловых объектов. Поэтому я планирую использовать очередь для преобразования в требуемый формат, и местоположение часто меняется.
Я сомневаюсь, должен ли я сначала сохранить этот файл во временной папке, а после процесса очереди выбрать его оттуда, чтобы преобразовать и переместить в нужное место. Или есть способ, которым я могу написать микросервисы, которые я могу отправить весь файловый объект, где он выполняет ту же работу непосредственно в очереди.
Я не хочу хранить изначально в другом формате и читать его как часть очереди, так как он потребляет немного ресурсов процессора.