Описание тега aws-snowball
AWS Snowball может передавать терабайты или петабайты данных в AWS и из него, а также обеспечивать хранение и локальные вычисления в тех местах, где подключение к Интернету может быть невозможным.
1
ответ
Перенос данных на снежный ком aws s3 с помощью C#
Я пытаюсь импортировать все свои данные на s3, используя снежный ком, но мне нужно отслеживать некоторые метаданные для каждого файла. У меня есть некоторый код C#, который загружает файлы прямо в корзину с этими метаданными, и это работает нормальн…
31 май '18 в 13:58
1
ответ
Превышен верхний предел AWS Snowball GC
Я пытаюсь отправить 5 ТБ данных на S3 через сервис снежного кома AWS. Я получил снежный ком и соединился с ним через клиента снежного кома. Однако, когда я вызываю команду snowball cp для копирования файлов с локального сервера на снежный ком, я ста…
04 дек '17 в 11:49
1
ответ
Amazon-S3 обращается к сервису доставки жестких дисков?
Существует ли служба, которая будет принимать список URL-адресов Amazon S3 от клиента, загружать и копировать файлы на один / несколько жестких дисков, а затем отправлять жесткие диски клиенту за плату? Я думаю о чем-то вроде Amazon Snowball, но это…
21 июл '16 в 10:43
0
ответов
Как получить теги из объектов в AWS Snowball?
Мне нужен AWS Snowball для получения большого объема данных с S3. Все объекты помечены различными метаданными. Прежде чем заказать Snowball, я пытаюсь выяснить, как получить метаданные с тегами при копировании файла в нашу сеть с помощью Snowball Cl…
18 апр '19 в 23:19
0
ответов
В файлах, загруженных через Snowball, отсутствует FF в начале файла
Недавно мы загрузили файлы размером 3+ ТБ, используя Amazon Snowball. Мы выполнили некоторую обработку файлов, переместив их в папки и установив их тип содержимого. Файлы теперь не читаются, я скачал файл JPG и сравнил его с оригиналом, и единственн…
02 май '19 в 18:01
0
ответов
Перенос данных из NetApp FAS2240 AWS Snow Ball
Мне нужно передать 40 ТБ данных из NetApp FAS2240 в AWS Snow Ball. Следующие шаги настройки: 1. На рабочей станции я загрузил клиент Snow Ball и разблокировал устройство Snow Ball с помощью команды snowball start -i IP Address -m Path/to/manifest/fi…
17 фев '20 в 09:50
1
ответ
hdfs distcp не может скопировать из hdfs в s3
У нас есть снежный ком, настроенный на нашем внутреннем промежуточном узле с конечной точкой http://10.91.16.213:8080. Все работает нормально, я даже могу перечислить файлы в этом снежном коме с помощью команды s3 cli aws s3 ls my-bucket/data/ --end…
02 сен '20 в 22:17
0
ответов
Можно ли интегрировать AWS Snowball с DMS и SMS?
Вопрос 1. Может ли AWS DMS работать с AWS Snowball? особенно если вы переносите базу данных из локальной среды в AWS (как RDS), где ее размер> 10 ТБ, ваше интернет-соединение медленное, и вы хотите выполнить миграцию как можно скорее. Могут ли DM…
25 фев '21 в 07:32
0
ответов
Оптимизация извлечения объектов из Snowball Edge
В итоге я купил устройство SnowballEdge и попытался скопировать файлы с устройства в свою систему. На устройстве примерно 9 миллионов объектов по 9 ТБ. Самая большая проблема: Все локальные команды aws cli имеют ограничение в 1000 объектов, поэтому …
24 июн '21 в 01:36
0
ответов
AWS DataSync для файлов, импортированных Snowball
Я переместил файлы из центра обработки данных в AWS с помощью Snowball. Теперь, прежде чем мы завершим миграцию, еще будет период времени, когда пользователи будут добавлять или изменять файлы в центре обработки данных. Как я могу использовать DataS…
05 июл '21 в 14:01
1
ответ
Можно ли использовать теги объектов с AWS Snowball Edge?
Будет использоваться Snowball Edge для переноса некоторых данных. Мы хотим использовать теги объектов, чтобы объекты могли передаваться в AWS с их тегами, но не ясно, можно ли это сделать на Snowball? Есть ли стандартный способ справиться с этим? Бл…
20 авг '21 в 15:57
0
ответов
Устройства AWS Snow - какое событие генерируется при передаче файлов на S3?
Я пытаюсь перенести файлы из местного Drobo в S3 Deep Archive. Из-за того, как S3 хранит вещи в Deep Storage, никогда не имеет смысла архивировать объекты размером 8 КБ или меньше (потому что вы все равно заплатите за 8 КБ стандарта). Правила жизнен…
24 сен '21 в 09:34
0
ответов
main.sh: строка 2: синтаксическая ошибка рядом с неожиданным токеном `('
Я не знаю, почему код не запускается. Я использую сервер Snowball Linux в своей школе. Вот код: #!/bin/bash int main() { char ch; printf("Enter a password : "); int count = 0; do{ ch = getchar(); count++; } while(ch != '\n'); int score = -(10 - coun…
12 ноя '21 в 04:20
1
ответ
Данные искровой загрузки из s3a на настраиваемой конечной точке останавливаются
Я пытаюсь выполнить простую операцию на искровом кластере, просто запустив pyspark --master yarnследующий код: op = spark.read.format("csv") op = op.options(header=True, sep=";") # This is actually a custom S3 endpoint on a AWS Snowball Edge device …
23 фев '22 в 10:30
2
ответа
Как я могу экспортировать ami из aws marketplace в ведро s3?
Мне нужно экспортировать ami торговой площадки AWS в корзину s3. Функция импорта/экспорта ec2 не работает, так как базовый ami является ami торговой площадки Вот ошибка, которую я получаю An error occurred (NotExportable) when calling the ExportImag…
16 фев '22 в 02:27
0
ответов
Экспорт терабайтов из AWS Snowball Edge в локальный ресурс
Полный нуб AWS здесь - Нам необходимо экспортировать около пары терабайт данных из снежного кома AWS, который попал нам в руки, в решение для локального хранилища. Проблема в том, что никто из нашей небольшой команды не знаком с AWS или написанием с…
03 апр '23 в 14:28