Описание тега gcs

Вопросы с тегом
2 ответа

Удалите несколько файлов (объектов), перечисленных в файле ".txt", с помощью "gsutil" (GCS).

Я мог удалить 3 файла (объекта), «apple.jpg» , «orange.png» и «kiwi.gif» на GCS с помощью команды «gsutil» ниже в Cloud Shell : (Hint: gs://bucketName/fileName) gsutil rm gs://test.com/apple.jpg gs://test.com/orange.png gs://test.com/kiwi.gif Теперь…
08 ноя '21 в 17:17
0 ответов

Файлы Apache Flink Parquet загрузка gcs

Я получаю эту ошибку при загрузке моих паркетных файлов в GCS с помощью Apache Flink. Вы можете мне помочь java.io.IOException: ошибка при получении токена доступа с сервера метаданных по адресу: http://169.254.169.254/computeMetadata/v1/instance/se…
09 ноя '21 в 14:53
2 ответа

Скачивание и выгрузка файлов и папок из GCS в Cloud Shell и наоборот.

У меня есть несколько файлов и папок в GCS(Google Cloud Storage): И я хочу загрузить их в Cloud Shell: Есть какие-нибудь способы это сделать?
08 ноя '21 в 20:36
1 ответ

(Retool) Сделайте файл «.txt» в GCS, но я получил ошибку «Не удалось выполнить 'atob' в 'Window': строка, которую нужно декодировать, неправильно закодирована».

В Retool я пытаюсь создать файл ".txt" с некоторыми словами для Google Cloud Storage(GCS), но получаю эту ошибку . makeTXTFile: не удалось выполнить 'atob' в 'Window': декодируемая строка неправильно закодирована. Это настройки запроса в Retool для …
22 ноя '21 в 19:38
1 ответ

Гем обработки изображений создает файл с измененным размером в GCS

У меня есть объект Item, который # has_many_attached :photos. Моя служба активного хранилища - это GCS. Я создал метод экземпляра #thumbnail() для Item. Нравится: def thumbnail(photo) photo.variant(resize_and_pad: [400, 400, gravity: 'center', backg…
23 ноя '21 в 21:58
2 ответа

Ошибка RESOURCE_EXHAUSTED при связывании ведра GCS с firebase (projects.buckets.addFirebase)

У меня есть сценарий, который создает ведро GCS, связывает его с firebase и применяет правила firebase к ведру. Недавно я столкнулся с этой ошибкой, что он не может связать ведро GCS с firebase. Я использую метод REST projects.buckets.addFirebase чт…
04 дек '21 в 20:10
1 ответ

Как настроить разрешение корзины GCS с помощью terraform?

Я хочу установить разрешение для служебной учетной записи sa-email.com в bucket bucket_A. Как я могу настроить terraform, как показано ниже? sa-email.com может создать файл в bucket_A sa-email.com не может удалить файл в bucket_A
06 дек '21 в 17:29
0 ответов

Получение ошибки при использовании передачи данных Google для передачи нескольких файлов Json из GCSto Bigquery

Я получаю сообщение об ошибке при попытке передать файл из облачного хранилища Google в большой запрос Google. Это ошибка: сбой с ошибкой INVALID_ARGUMENT: ошибка при чтении данных, сообщение об ошибке: таблица JSON обнаружила слишком много ошибок, …
08 дек '21 в 13:32
1 ответ

Задание чтения Spark из объекта gcs зависло

Я пытаюсь локально прочитать объект с помощью искровой работы. Я ранее создавал с помощью другого задания Spark локально. При просмотре журналов я не вижу ничего странного, а в пользовательском интерфейсе искры задание просто зависает Прежде чем нач…
09 дек '21 в 04:38
1 ответ

Для схемы: gs не настроена система AbstractFileSystem.

Я получаю ошибку ниже при выполнении задания гоблина. Мой core-site.xml выглядит нормально и имеет необходимое значение. core-site.xml <property> <name>fs.AbstractFileSystem.gs.impl</name> <value>com.google.cloud.hadoop.fs.gc…
09 дек '21 в 18:46
0 ответов

Облачное хранилище Google. У вашего клиента нет разрешения на получение URL

У нас проблема в кластере кубернетов на Linode! Когда мы извлекаем изображение из eu.gcr.io, мы получаем эту ошибку: Failed to pull image "eu.gcr.io/": rpc error: code = Unknown desc = Error response from daemon: error parsing HTTP 403 response body…
13 дек '21 в 15:56
0 ответов

Как настроить GCS как ввод файлового сигнала

Мы храним наши журналы аудита в корзине GCS. мы хотели бы загружать их в Elasticsearch при необходимости, а не регулярно, с помощью filebeat. Я проверил вариант S3, где он позволяет нам использовать s3-подобные хранилища в качестве входных данных с …
12 дек '21 в 20:12
1 ответ

Название сегмента GCP не отображается / недоступно в обозревателе показателей

У меня есть ведро, которое я создал с помощью Terraform. У меня есть регулярные закачки по этому ведру, и все работает нормально. Теперь я хочу отслеживать количество объектов в этом сегменте. Когда я перехожу к мониторингу и выбираю GCS Bucket и фи…
14 дек '21 в 07:33
0 ответов

Метод доступа к облачному хранилищу Google

У меня есть требование доступа к документам, хранящимся в GCS bukcet, для доступа с локального веб-сервера. На моем сервере будет указано имя документа. Пользователь щелкнет имя документа, и внутренний контроль должен перейти в GCS, и документ долже…
14 дек '21 в 19:48
1 ответ

Пытаюсь записать файлы в папку dags

пытается создать папки и записать файлы в папку dags в ведре gcs через воздушный поток, используя следующий код Python: Path(f'/home/airflow/gcs/dags/API/config').mkdir(parents=True, exist_ok=True) with open(file='/home/airflow/gcs/dags/API/config/c…
16 дек '21 в 17:19
0 ответов

Google Cloud Dataflow не обновляет файл gcs без журнала ошибок (java) после версии с 2.25 до 2.34?

Мой поток данных читает файл из gcs и записывает в другое ведро gcs. Он работал хорошо, прежде чем я обновил версию sdk с 2.25.0 до 2.34. Версия 2.25Если выходной файл не существует, поток данных создаст его. Когда выходной файл уже существует, пото…
16 дек '21 в 10:24
1 ответ

GCS, подписанный URL и CORS

Я пытаюсь загрузить файл в GCS из браузера, используя подписанный URL. Я установил политику CORS для корзины: $ gsutil cors get gs://some-bucket/ [{"maxAgeSeconds": 3600, "method": ["HEAD", "GET", "OPTIONS", "PUT"], "origin": ["*"], "responseHeader"…
19 дек '21 в 13:57
0 ответов

Насколько эффективно читать данные из Bigquery с помощью Java?

Насколько эффективно читать данные из Bigquery с помощью Java? Рассмотрим таблицу с миллионами данных, в которой нет разделов. Это своего рода таблица усечения и загрузки. Насколько эффективно мы можем читать данные из BigQuery с помощью Java?
20 дек '21 в 14:46
1 ответ

Скрипт Python для автоматизации ЗАГРУЗКИ хранилища GCP

Я новичок в GCP и GCP Storage. Я хочу загрузить файлы из файловой системы на ПК в корзину GCS. Я нашел следующий код и изменил его. Но у меня есть файлы, которые находятся в такой папке: \F1\Data\Export\PlayOnUsers\2021\12\ То есть 2021 год и 12 мес…
23 дек '21 в 15:37
1 ответ

У нас есть вопрос относительно сегментов GCP. Можно ли разместить сегмент GCS позади VPN, возможно ли это в GCP?

У нас есть вопрос относительно сегментов GCP. Можно ли разместить сегмент GCS позади VPN, возможно ли это в GCP?
24 дек '21 в 11:17