Описание тега aws-datasync
AWS DataSync - это сервис передачи данных, который автоматизирует и ускоряет перемещение и репликацию данных между локальными системами хранения и сервисами хранения AWS через Интернет или AWS Direct Connect. DataSync поддерживает передачу данных между сетевой файловой системой (NFS) и Amazon Elastic File System (Amazon EFS) или Amazon S3.
3
ответа
AWS DataSync Lambda Automation
Я автоматизирую выполнение задачи AWS Datasync для EFS-EFS в разных регионах. Я написал лямбда-код на python и хочу начать выполнение задачи datasync с помощью выражения cron события CloudWatch. import boto3 client = boto3.client('datasync', region_…
13 авг '19 в 21:13
1
ответ
Убедитесь, что данные не потеряны во время синхронизации AWS S3
Мне нужно скопировать все содержимое корзины S3 в другую корзину S3. Планирование использовать s3 sync. aws s3 sync s3://sourcebucket s3://destinationbucket После этого процесса, есть ли способ проверить, все ли данные перенесены в новый сегмент? (т…
16 авг '19 в 12:06
0
ответов
Размещение агента aws datasync на временном экземпляре ec2 остановлено и запущено лямбда-функцией
Я пытаюсь перейти на AWS DataSync из rsync синхронизировать две эластичные файловые системы на AWS. Я хотел бы выполнять эту синхронизацию ежедневно между двумя файловыми системами EFS, и не ожидаю, что размер передачи будет очень большим. Проведя о…
25 июн '19 в 19:58
1
ответ
AWS Autosync: перенос данных с FTP-сервера на S3
У меня есть рабочий процесс, который перемещает 700 ГБ файлов с ftp-сервера на локальный сервер для обработки скриптов python. Я хотел бы перенести этот процесс в корзину AWS s3 для обработки лямбда.Я видел AWS data-sync как решение по разумной цене…
06 апр '20 в 02:52
2
ответа
Перенести существующие данные из Ali Cloud OSS в Amazon S3 Bucket
Мне интересно, есть ли какой-либо сервис AWS для переноса существующих данных из ali cloud OSS в корзину Aws S3. Вот сервис в Ali Cloud, который мигрирует с S3 на OSS. Мне нужно противоположное https://www.alibabacloud.com/blog/migrating-from-aws-s3…
02 дек '19 в 11:24
3
ответа
Необходимо перенести данные из AWS EFS в EFS в разных регионах
У меня есть EFS, настроенная в регионе Орегон, но поскольку EFS теперь доступна в регионе Токио, я хочу перенести все данные EFS в регион Токио, где EFS уже создан. В документе AWS упоминается AWS-DataSync, но он не работает должным образом для копи…
08 окт '19 в 10:08
0
ответов
AWS DataSync: добавьте EFS из другого региона в качестве конечной точки
Я пытаюсь добавить efs из другого региона, но не могу создать задачу. Не удается установить efs. У меня открыты все необходимые порты. Я пытаюсь добавить его как диск nfs, при выборе типа efs целевой efs не отображается в раскрывающемся списке. Люба…
03 окт '19 в 15:53
1
ответ
Как предоставить доступ к цели монтирования EFS агенту DataSync в локальной среде?
У нас работает локальный агент DataSync (образ виртуальной машины) и EFS с целью монтирования. Мы хотим предоставить агенту доступ к цели монтирования для выполнения задач синхронизации. Однако, похоже, не существует какой-либо группы безопасности, …
29 янв '20 в 11:48
0
ответов
AWS Glue синхронизирует данные из RDS (необходимо синхронизировать 4 таблицы из всей схемы) в S3 (формат apache parque)
Мы используем экземпляр Postgres RDS (db.t3.2xlarge с объемом данных около 2 ТБ). У нас есть мультитенантное приложение, поэтому для всех организаций, которые регистрируются в нашем продукте, мы создаем отдельную схему, которая копирует нашу модель …
17 авг '20 в 15:51
0
ответов
DataSync Межрегиональный переход от S3 к In-Cloud NFS
Мне нужно переместить данные с S3 в ca-central-1 на Fsx в us-east-1, прежде всего я установил агент Datasync в ca-central, но я не могу связаться с Fsx в другом регионе. После попытки установки в us-east-1 я получаю сообщение об ошибке: агент должен…
02 авг '20 в 00:10
0
ответов
Перенос данных из Onprem SQL SERVER в базу данных AWS RDS с помощью AWS Data Sync
Нам необходимо перенести данные из локальной базы данных SQL SERVER в AWS RDS. Можем ли мы использовать для этой цели синхронизацию данных? Если да, кратко перечислите шаги для выполнения этого действия, а также укажите, есть ли какие-либо ограничен…
04 фев '20 в 13:52
1
ответ
AWS DataSync не смог обнаружить файлы в исходной файловой системе NFS
Я пытаюсь синхронизировать данные с локальной виртуальной машины с ведром AWS S3 с помощью AWS Data Sync, я уже настроил агент AWS Data Sync на локальной виртуальной машине, агент теперь в сети, и мы также создали новую задачу, Задача доступна в сос…
14 апр '20 в 09:15
0
ответов
AWSCognito - управление наборами данных
Проблема. Я успешно реализовал аутентификацию пула удостоверений. Мои базовые запросы AWS к Dynamo и т. Д. Работают без проблем. Используя удостоверение пула удостоверений, я пытаюсь управлять набором данных, связанным с удостоверением. Я хочу созда…
05 авг '20 в 04:14
0
ответов
AWS DataSync для доступа к S3 в другом аккаунте
У меня есть агент AWS DataSync, развернутый в учетной записи A, и я хочу настроить целевое местоположение DataSync в качестве корзины S3 в учетной записи B. Можно ли это сделать? И если да, то может ли кто-нибудь дать какое-нибудь руководство? Похож…
11 май '21 в 17:39
1
ответ
Описание ошибки ENI при выполнении задачи DataSync в Fargate / Lambda
У меня возникает ошибка «InvalidRequestException: неверный запрос для описания ENI» при выполнении задачи AWS DataSync из Fargate/Lambda. Что могло быть причиной этого?
12 май '21 в 13:49
0
ответов
Настройка AWS Data Sync
Мы хотим передавать 10 ТБ данных с помощью DataSync с полосой пропускания 500 МБ / с. Но мы хотим, чтобы это задание выполнялось только 2-3 часа в день, а не непрерывно, чтобы оно не использовало никакую сеть в рабочее время. Я не вижу ни одной опци…
14 июн '21 в 15:15
1
ответ
Вариант использования синхронизации данных AWS и шлюза хранилища
В чем разница в реальных сценариях использования между синхронизацией данных AWS и шлюзом хранения, поскольку оба они позволяют передавать данные из / в локальный центр обработки данных и AWS.
29 июн '21 в 11:59
0
ответов
AWS DataSync для файлов, импортированных Snowball
Я переместил файлы из центра обработки данных в AWS с помощью Snowball. Теперь, прежде чем мы завершим миграцию, еще будет период времени, когда пользователи будут добавлять или изменять файлы в центре обработки данных. Как я могу использовать DataS…
05 июл '21 в 14:01
0
ответов
Может ли AWS DataSync обновить измененный файл?
Я понимаю, что AWS DataSync может переместить новый файл в хранилище AWS. Однако, если файл будет изменен в источнике, будет ли обновленное передано в AWS?
05 июл '21 в 00:38
1
ответ
Как синхронизировать базу данных RDS по регионам в AWS
У меня есть два экземпляра MYSQL RDS в штатах Огайо и Мумбаи. Оба экземпляра RDS должны синхронизировать друг друга. Есть ли у AWS какие-либо сервисы для синхронизации между базой данных RDS? еще мы должны настроить для достижения? Оба RDS должны си…
04 авг '21 в 12:38