Описание тега amazon-dms

Вопросы с тегом
AWS Database Migration Service - это веб-сервис, который можно использовать для переноса данных из локальной базы данных, в инстанс БД Amazon Relational Database Service (Amazon RDS) или в базу данных в Amazon Elastic Compute Cloud (Amazon EC2). к базе данных в сервисе AWS.
1 ответ

AWS DMS: данные не реплицируются в AWS Redshift

Моя исходная БД - AWS RDS, а моя целевая таблица - AWS Redshift. Данные загружаются успешно, но после этого изменения не передаются в целевую БД, и исключений нет. Конфигурация: Тип миграции: Полная загрузка, Текущая репликация. Исходная база данных…
17 ноя '17 в 16:07
2 ответа

Как непрерывно заполнять кластер Redshift из AWS Aurora (не синхронизируется)

У меня есть несколько баз данных MySql (OLTP), работающих на кластере AWS Aurora. У меня также есть кластер Redshift, который будет использоваться для OLAP. Цель состоит в том, чтобы реплицировать вставки и изменения из Aurora в Redshift, но не удал…
24 янв '19 в 17:51
0 ответов

Схема базы данных загрязнена после миграции с помощью AWS DMS

Я использую движок AWS RDS Aurora с PostgreSQL-совместимостью в качестве базы данных. Я перенес свою базу данных из Aurora в AWS RDS PostgreSQL с помощью службы AWS DMS, и задача успешно выполнена. Схема сопоставления моей таблицы следующая: { "rule…
11 окт '18 в 07:37
1 ответ

Не удается выполнить задачу Amazon DMS с пользовательскими правилами при погружении в Kinesis

Я пытаюсь прослушать изменения Aurora DB с помощью Amazon DMS и перенести изменения в поток Kinesis, где обработка будет выполняться функцией Lambda, прослушивающей поток. Я имел в виду приведенную ниже документацию, чтобы написать свои правила. htt…
05 фев '19 в 13:28
0 ответов

Как использовать AWS DMS для переноса списка JSON в DynamoDB?

Я пытаюсь использовать AWS DMS (служба миграции баз данных) для загрузки данных из MS SQL Server в AWS DynamoDB. Один из столбцов в таблице SQL содержит допустимый список JSON. Я пробовал несколько вещей, но данные продолжают поступать в DynamoDB в …
29 ноя '18 в 23:26
0 ответов

Подключение DMS к S3

Мы пытаемся настроить DMS с источником S3, однако мы не можем подключить экземпляр репликации к конечной точке источника S3. Когда мы запускаем тест соединения на конечной точке источника, мы получаем ошибку: Error Details: [errType=ERROR_RESPONSE, …
05 дек '17 в 03:27
2 ответа

Миграция с Heroku PostgreSQL на AWS RDS с использованием AWS Data Migration Service (DMS) не работает

Я пытаюсь использовать AWS DMS для копирования и репликации данных из базы данных Heroku PostgreSQL в экземпляр AWS RDS PostgreSQL, но это не работает (подробнее см. Ниже). В DMS Log я вижу следующее сообщение: 2017-10-25T17:43:35 [SOURCE_CAPTURE ]E…
25 окт '17 в 18:01
0 ответов

AWS DMS - вызов внешних конечных точек обслуживания

Я планирую реплицировать данные с моих локальных серверов в облако с помощью AWS DMS. В рамках миграции мне нужно вызвать внешнюю службу для токенизации конфиденциальных данных в некоторых столбцах. Предоставляет ли DMS возможность сделать это как ч…
05 апр '18 в 21:18
0 ответов

Миграция с MySQL на DynamoDB с полями в формате json

Мне нужно перенести данные из таблицы MySQL в DynamodB. Исходная таблица с простыми столбцами имеет longtext столбец, в котором хранятся какие-то json-объекты. Все объекты имеют одинаковую структуру. Моя цель - перенести эти данные в одну таблицу Dy…
17 июл '18 в 07:15
0 ответов

AWS DMS - запланированная миграция БД

У меня есть Postgresql DB в RDS. Мне нужно получать данные из нескольких таблиц в postgresql db и выгружать данные в корзину S3 каждый час. Я только хочу, чтобы изменения дельты (любые новые вставки / обновления) отправлялись ежечасно. Возможно ли с…
09 апр '18 в 18:52
0 ответов

AWS DMS для хранения обновлений / удаления / вставки флагов в целевую таблицу

У меня есть настройка задачи AWS DMS для текущей репликации с локальным сервером SQL в качестве источника и AWS RDS (разновидность SQL Server) в качестве цели. Я хочу иметь возможность отслеживать изменения для каждой записи в таблице, используя доп…
15 мар '19 в 05:48
1 ответ

Репликация DMS между учетными записями для экземпляров RDS за компьютерами Bastion

У меня есть производственные стеки внутри производственной учетной записи и стеки разработки внутри учетной записи разработки. Стеки идентичны и настроены следующим образом: Каждый стек как свой собственный VPC. Внутри VPC находятся две общедоступны…
25 мар '19 в 12:17
0 ответов

Как перенести числа из файла CSV в Redshift с помощью AWS DMS?

Я пытаюсь перенести файл CSV из S3 в Redshift с помощью AWS DMS. Один из моих столбцов в CSV содержит целое число. В файле отображения JSON для конечной точки S3 я дал столбцу числовой тип (я пробовал несколько типов), но по какой-то причине столбец…
27 мар '19 в 11:03
1 ответ

Как я могу использовать S3 bucket другой учетной записи AWS в DMS моей учетной записи?

Я знаю учетные данные (ключ доступа и секрет) корзины S3 другой учетной записи AWS. Теперь я хочу создать задачу переноса базы данных с этим сегментом s3 другой учетной записи в качестве конечной точки источника. Кто-нибудь знает, какие шаги мне нуж…
09 июн '19 в 01:50
0 ответов

Ошибка при SQLExecute с параметрами LSN '0x','0x'

У меня есть таблица, содержащая около 100 столбцов (первичный ключ как int). У меня есть конфигурационная служба миграции базы данных для этой таблицы, но задание выдает журналы исключений, как показано ниже: sqlserver_capture_source_loop (...) enco…
08 окт '19 в 07:08
0 ответов

DMS TransactionID и контекст пользователя

Я собираюсь использовать AWS DMS и использовать поток Kinesis для создания аудитов записей. CDC производит записи для Kinesis сtransaction-id но я не уверен, как связать это с каким-либо контекстом приложения. Эта полезная статья отражает суть того,…
14 июн '20 в 19:06
1 ответ

Как хранить данные RDS в S3 почти в реальном времени? (AWS DMS)

Моя цель - хранить данные RDS в реальном времени на S3. Я нашел службу aws dms, но она точно не задокументирована, как она работает, поэтому я не решаюсь представить ее. Как работает полная нагрузка? Я рассматриваю полную загрузку + CDC. Однако я не…
24 июл '20 в 10:09
0 ответов

Проблема с AWS Database Migration Service - SQL Server as Source

У меня возникла проблема с использованием AWS Database Migration Service для реализации репликации транзакций с SQL Server в качестве движка исходной базы данных, помощь очень ценится. В "safeguardPolicy атрибут соединения по умолчанию" к "RELY_ON_S…
02 май '20 в 22:25
1 ответ

Может ли Amazon DMS сформировать состояние записи до и после перехода на Kafka?

Мы экспериментируем с Amazon DMS в качестве альтернативы Debezium для внесения изменений базы данных SQL Server в Kafka. Все идет хорошо, но есть одна особенность Debezium, которую нам будет не хватать в DMS: возможность сообщений в Kafka содержать …
26 окт '20 в 18:12
1 ответ

Ошибка подключения кинезиса в качестве цели с помощью dms

Я пытаюсь передать данные aws s3-DMS-kinesis. Я загрузил файл cab в ведро s3. Я успешно получил данные из s3 с помощью DMS, но когда я пытаюсь подключить цель DMS к кинезису, я получаю сообщение об ошибке «не удалось подключиться к базе данных». Ког…
28 окт '21 в 03:02