Использует ли gsutil cp пакетную загрузку для загрузки нескольких файлов одновременно?
Я знаю, что gsutil cp может работать параллельно, чтобы ускорить процесс, но я буду загружать много небольших файлов и пытаюсь минимизировать накладные расходы на каждый запрос. Gsutil автоматически пакетной загрузки нескольких файлов в один пакетный запрос?
(Я имею в виду эту функцию пакета здесь) https://developers.google.com/storage/docs/json_api/v1/how-tos/batch
1 ответ
Решение
Нет, в данный момент gsutil этого не делает. Однако если вы запустите gsutil с флагом -m, он будет работать в многопоточном режиме, который будет загружать ваши файлы параллельно.