Описание тега amazon-s3

Amazon S3 (простой сервис хранения) - это сервис онлайн-хранилища объектов от Amazon Web Services. ВОПРОСЫ ДОЛЖНЫ БЫТЬ О ПРОГРАММИРОВАНИИ. Вопросы об общей поддержке S3, функциональности, конфигурации и т. Д. НЕ В ТЕМЕ.
1 ответ

Насколько безопасен AWS Cognito?

Я пытался интегрировать пул пользователей AWS cognito, однако я чувствую, что он больше не защищен. Потому что идентификатор, который получает токен при входе в систему, содержит идентификатор пула пользователей. Используя этот идентификатор пула по…
1 ответ

Загрузка файлов на S3 с использованием Laravel 5.1 завершается неудачно

Я пытаюсь загрузить некоторые файлы в S3, используя Laravel и его API-интерфейс Filesystem. Я получаю следующую ошибку: S3Exception in WrappedHttpHandler.php line 159: Error executing "PutObject" on "https://s3..amazonaws.com/example-bucket/433922_1…
21 ноя '15 в 09:31
1 ответ

AWS лямбда-редактор HTML-шаблон с данными из DynamoDB

Я пытаюсь вставить данные, извлеченные из базы данных DynamoDB, в шаблон HTML, который хранится на S3 (по сути, заполнение пробелов в форме HTML). Я не очень хорошо разбираюсь в JavaScript, поэтому не совсем уверен, с чего начать. До сих пор я был в…
1 ответ

Храните JSON Blobs в MySQL или S3

Я собираюсь хранить некоторые данные спецификации в виде строк JSON (рост, вес и т. Д.) - по одной на каждый продукт. Доступ к данным будет осуществляться очень редко (сначала один раз, а затем снова, только если я изменю алгоритм и мне потребуется …
17 фев '12 в 13:26
1 ответ

Доступ запрещен при помещении файла из HDFS в корзину S3

Я написал программу на Java, которая включена в рабочий процесс oozie, который помещает файлы из HDFS в корзину S3. Однако я получаю следующую ошибку com.amazonaws.services.s3.model.AmazonS3Exception: доступ запрещен (сервис: Amazon S3; код состояни…
09 окт '17 в 06:32
2 ответа

Rails 3.2 объясняет причину странных проблем с загрузкой документов

Это странная проблема, о которой я не смог найти упоминания в Google. Иногда я сталкиваюсь с этим исключением в транзакциях, которые включают загрузку документов в AWS S3. Mysql2::Error: Table 'app_name_development.begin' doesn't exist: EXPLAIN BEGI…
1 ответ

Файлы процесса помещаются в корзину s3 в лямбда-AWS в том порядке, в котором они были помещены

Мой текущий рабочий процесс выглядит следующим образом: Пользователь помещает файл в s3 bucket -> s3 bucket запускает событие в lambda -> lambda обрабатывает файл в s3 bucket. Это также вызывает другие лямбды. Я хочу разобраться со сценарием, когда …
1 ответ

pyspark выбирает подмножество файлов с помощью regex/glob из s3

У меня есть несколько файлов, каждый из которых разделен по дате (date=yyyymmdd) на амазоне с3. Файлы возвращаются на 6 месяцев назад, но я бы хотел ограничить использование сценария данными только за последние 3 месяца. Я не уверен, смогу ли я испо…
21 июл '15 в 15:44
0 ответов

Как читать из одной корзины S3 и записывать в другую в pyspark?

Я попытался сделать следующее - установить конкретные конфиги для каждого сегмента - чтобы читать из одного сегмента S3 и записывать в другой. Два сегмента имеют разные учетные данные и принадлежат разным учетным записям. Однако чтение работает толь…
16 апр '18 в 03:51
2 ответа

Как разрешить доступ к контенту в Amazon S3 только определенному пользователю

Я новичок в Amazon S3. Мне нужна помощь с решением для хранения S3. Здесь моя проблема. Я создал ведро в Amazon S3. Теперь каждый может получить доступ к моему URL корзины (например, https://bucket_name.s3.amazonaws.com/), и они смогут увидеть все ф…
1 ответ

Как клиент должен загрузить ресурс с AWS S3

Я новичок в AWS S3 - использую EC2 (веб-приложение для хостинга) и S3 (хранилище ресурсов) в одном регионе AWS и назначил EC2 с ролью IAM s3accessТаким образом, EC2 можно легко скачать с S3. Вопрос в том, как клиент должен скачать с S3? Видимо клиен…
12 янв '17 в 05:56
2 ответа

AWS S3 подчеркивают обходной путь

Ситуация: у меня есть куча изображений в корзине S3 с именами подчеркивания (например, my_images) Однако при создании экземпляра Java-клиента с помощью Amazon SDK (v 1.8.7) AWSCredentials awsCredentials = new BasicAWSCredentials(accessKey, secretKey…
02 авг '14 в 02:27
1 ответ

Flink Streaming AWS S3 читает несколько файлов параллельно

Я новичок во Flink, мое понимание следующее вызов API StreamExecutionEnvironment.getExecutionEnvironment().readFile(format, path) будет читать файлы параллельно для заданного пути S3. Мы храним файлы журналов в S3. Требуется обслуживать несколько кл…
1 ответ

SparkContext addFile вызывает исключение FileNotFoundException

Я пытаюсь доставить большой файл каждому исполнителю с помощью метода sparkContext.addFile. Источник этого большого файла - Amazon S3 (ПРИМЕЧАНИЕ. В случае источника HDFS все работает нормально) val context = stream.context.sparkContext context.addF…
15 авг '16 в 13:34
2 ответа

Скачать файл без отображения URL

История У меня были якорные теги, показывающие имена файлов, которые при нажатии использовали для загрузки файла с S3 url. Теперь мой клиент требует, чтобы я скрывал URL-адрес и не показывал его при загрузке файла, а также использовал уникальное имя…
10 май '17 в 13:35
1 ответ

Неожиданный подписанный URL-адрес версии 4 с использованием com.amazonaws:aws-java-sdk 1.11.18

Мы создаем подписанные URL-адреса amazon S3, используя (com.amazonaws:aws-java-sdk версия 1.11.18) - AmazonS3 s3 = new AmazonS3Client(credentials); s3.generatePresignedUrl(bucketName, objectName, expiration, method); Мы ожидаем получить подписанный …
07 дек '17 в 12:32
1 ответ

Внедрить ссылку "Отписаться" в рассылке, какова внутренняя функциональность, поскольку я использую Amazon SES для отправки электронных писем

Мой шаблон или новостная рассылка нуждается в ссылке для подписки Я отправляю массовые электронные письма с новостными письмами от Amazon SES API, используя php, если у amazon есть функция ссылки для отмены подписки, чтобы отписаться от получателей,…
0 ответов

Анонимные пользователи не могут инициировать множественные загрузки. Пожалуйста, подтвердите

Я получаю следующую ошибку - AccessDeniedАнонимные пользователи не могут инициировать множественные загрузки. Пожалуйста, подтвердите. 0C687E53286678DE eqEEEENy6phBYvOySn3gOsbk9wJYjbE/yWK6MBtmR0M4Ir0TEdh9SfApX/EdZZ6sZ7Mc/wSwh0U= Когда я звоню в AWS …
30 мар '16 в 03:48
2 ответа

Grails хостинг с Neo4j для чтения / записи файлов

Я разрабатываю приложение, основанное на neo4j, природа neo4j - это просто простые файлы, поэтому он должен иметь возможность записи в локальные файлы. Google App Engine не поддерживает запись в локальные файлы. Я смотрю на Amazon S3 и EC2 прямо сей…
09 июл '11 в 14:26
1 ответ

Использование Java-кода, как вызвать мою лямбда-функцию, когда новый файл загружен в корзину s3

Я новый ребенок в мире AWS. У меня есть одно требование, пожалуйста, помогите мне получить мой запрос. Я написал одну лямбда-функцию для чтения содержимого файла из корзины s3, и она хранит детали внутри моего экземпляра PostgreSQL RDS в AWS. К счас…