Описание тега gsutil

NoneGsutil - это программа командной строки, которая позволяет хранить, совместно использовать и управлять данными, размещенными у поставщиков облачных хранилищ.
2 ответа

Не удается загрузить файл в GCS с помощью gsutil

Копирование файла: //InstreamImpression.csv.gz [Content-Type = application / octet-stream]... AccessDeniedException: 401 Требуется вход в систему fe13d1e0fb408639_4...: 46,75 МБ /46,77 МБ CommandException: 1 файлы / объекты не могут быть переданы. П…
14 июл '14 в 23:41
1 ответ

Использует ли gsutil cp пакетную загрузку для загрузки нескольких файлов одновременно?

Я знаю, что gsutil cp может работать параллельно, чтобы ускорить процесс, но я буду загружать много небольших файлов и пытаюсь минимизировать накладные расходы на каждый запрос. Gsutil автоматически пакетной загрузки нескольких файлов в один пакетны…
14 ноя '13 в 13:17
1 ответ

Подпроцесс python не будет хорошо работать с командами копирования / перемещения gsutil

В Python я использую подпроцесс для вызова команд gsutil copy и move, но в настоящее время я не могу выбрать несколько расширений. Та же команда gsutil работает в терминале, но не в python: cmd_gsutil = "sudo gsutil -m mv gs://xyz-ms-media-upload/*.…
09 мар '15 в 12:30
1 ответ

Влияет ли gsutil на облачные переводы?

Я буду пересылать партии ценных объектов из регионального хранилища Google Cloud Storage (GCS) холодной линии, и мой клиент хочет гарантировать, что файлы не будут повреждены в процессе. Делать объекты, перемещенные в GCS, используя gsutil mv, пройт…
2 ответа

URL подписанный gsutil, скрыть имя файла и корзины

Таким образом, я могу успешно создать временный подписанный URL в облачном хранилище Google, со сроком действия и т. Д. Однако подписанный URL все еще имеет четко видимое имя сегмента и имя файла. Теперь я понимаю, что когда загрузка произойдет, имя…
09 июл '18 в 12:38
1 ответ

Является ли Billable Op изменяющим класс хранения существующих объектов?

Я пытался изменить класс хранения набора существующих объектов (более 300 ГБ), как рекомендовано в этом посте: Я попробовал это на одном файле сначала: fyn@pod-arch:~$ gsutil ls -L gs://some-bucket/sub-dir/audioArch.mp3 gs://some-bucket/sub-dir/audi…
1 ответ

Как выполнять профильные операции в gstuil при копировании файлов из S3 в GCS?

В AWSCLI мы можем создавать профили в файле.boto и переключать профили при выполнении таких операций, как cp, ls, mv и т. Д. Как выполнять те же операции на основе профиля в инструменте gsutil? Я могу добавить информацию о access_key и secrect_key в…
09 авг '17 в 12:57
8 ответов

ResumableUploadAbortException: 403 недостаточно прав

Я использую Google Cloud Storage и Google Compute Engine и пытаюсь загрузить данные в мою корзину с моей виртуальной машины. У моего ведра есть права на чтение / запись, как и у любого, кто имеет к нему доступ. Они помечены как владелец. Я могу скач…
1 ответ

GSUTIL traceback-Linux Mint

Я пытаюсь установить GSUTIL, после установки он дает следующий вывод для каждой команды, Traceback (most recent call last): File "/usr/local/bin/gsutil", line 5, in <module> from pkg_resources import load_entry_point File "/usr/lib/python2.7/d…
25 сен '15 в 17:42
1 ответ

Настройте файл gsutil .boto для использования AWS STS accept_role

С трудом удается разобраться, если автономная версия gsutil (zip-файл, который можно загрузить по адресу: https://cloud.google.com/storage/docs/gsutil_install) поддерживает загрузку из сегментов S3 с использованием (Сервис AWS Security Token Service…
16 июл '18 в 02:28
1 ответ

Доступ к данным магазина Google Play с помощью GSUTIL на nodejs

Я пытаюсь получить доступ к данным из магазина Google Play, используя GSUTIL в nodejs. Когда я запускаю следующую команду в моей командной строке, я могу получить файлы: gsutil cp -r gs://mybucket /mylocalmachine Как запустить эту команду на моем се…
11 мар '16 в 08:30
1 ответ

Как скачать папку с квадратными скобками в названии?

У меня есть много папок в Google Cloud Storage, которые содержат квадратные скобки в названии. gsutil видит в квадратных скобках подстановочные знаки, и я не могу загрузить проект. Могу ли я скачать папки другим способом? Я пытался использовать esca…
2 ответа

Android gsutil не работает

Я хочу экспортировать оценки и отзывы из моего приложения для Android. Я следовал инструкциям gsutil и мог установить gsutil на свой компьютер, а затем попытался экспортировать свои оценки следующим образом gsutil cp -r gs://pubsite_prod_rev_XXXXXX/…
13 сен '14 в 10:35
1 ответ

Установить права доступа для объекта gs bucket для речевого API

Я хочу переписать длинный аудиофайл в текст. Поэтому я создал ведро и установил его как частное использование gsutil acl set private gs://bucket затем я установил доступ только для загрузки из определенного аккаунта gsutil acl ch -u myaccount@provid…
1 ответ

Сценарий оболочки для копирования данных с удаленного сервера в Google Cloud Storage с помощью Cron

Я хочу синхронизировать данные моего сервера с Google Cloud Storage для автоматического копирования с использованием сценария оболочки. Я не знаю, как сделать сценарий. Каждый раз, когда мне нужно использовать: gsutil -m rsync -d -r [Source] gs://[B…
29 май '18 в 12:11
1 ответ

Прервать передачу gsutil

Я передаю папку, содержащую более 100 тяжелых файлов (несколько сотен МБ) gsutil в мое облачное хранилище Google (Nearline). Я сделал ошибку в пути к папке назначения. Поэтому я ищу способ прервать перевод. Вот команда, которую я использовал: python…
1 ответ

Можно ли указать разные списки ACL для разных папок в одной и той же корзине?

Я хотел бы указать разные уровни ACL по умолчанию для двух разных папок в одном хранилище Google Cloud. Это вообще возможно, или есть какой-то обходной путь? Возможно, задним числом можно указать разные уровни ACL для разных папок, используя gsutil …
1 ответ

gsutil застрял без копирования каких-либо данных

Я пытаюсь загрузить файлы из экземпляра вычислительного движка (debian) в облачное хранилище. в какой-то момент гсутил полностью перестал работать. При запуске с флагом -D я вижу эти ответы: ответ: 'HTTP/1.1 400 Bad Request\r\n'header: Content-Type:…
27 май '14 в 21:17
1 ответ

Gsutil выдает ошибку 401 несмотря на новую установку и правильные учетные данные

Я использую gsutil с Google Cloud почти год через мою организацию без проблем. Сегодня утром, когда я пытаюсь использовать любой gsutil Команда, я получаю следующую ошибку: 401 Anonymous users does not have storage.objects.list access to bucket <…
1 ответ

Загрузка файлов локально с помощью GSUtil

Кто-нибудь знает хороший способ загрузить набор файлов локально в эмулируемом облачном хранилище Java dev_appserver. Это не сработало: $ gsutil rsync gs://mybucket http://localhost:8888/mybucket InvalidUrlError: Unrecognized scheme "http". Я открыт …
25 фев '15 в 04:09