Архивирование фрагментированных данных в один файл для оптимизации загрузки из Azure BLOB-объектов
В BLOB-объектах Azure хранятся файлы изображений общим объемом ~50 ГБ. Средний размер файла составляет ~4 КБ. я использую azcopy чтобы загрузить их в мою локальную среду на основе Ubuntu.
Производительность, загружая эти файлы один за другим - вот что azcopy делает сейчас - вероятно, так медленно, как я могу это сделать. Есть ли лучшая стратегия?
В идеале я хочу иметь возможность архивировать файлы в один файл, а затем перенести его. Есть ли способ сделать это с azcopy на Ubuntu?
1 ответ
Решение
No, there isn't a way to do so. Not about AzCopy implementation, it's due to Azure Storage Service doesn't provide such API.