Как *НЕПРЕРЫВНО* перемещать данные из приложения .NET Windows (база данных SQL Server) в приложение (AWS), размещенное в облаке (DynamoDB)?
У меня есть приложение .NET для Windows, которое хранит/извлекает данные на/с SQL Server. У меня также есть клон этого приложения, работающий в облаке (созданный с использованием сервисов AWS). Приложение. в облаке использует DynamoDB. Теперь мне нужно переместить данные из SQL Server в DynamoDB в два этапа:
1) Массовая загрузка данных из SQL Server в DynamoDB изначально
2) Непрерывное перемещение данных из SQL Server в DynamoDB, например, когда новый пользователь добавляется в приложение .NET Windows, пользователь, добавленный в SQL Server, также должен быть создан в DynamoDB.
Также есть третья фаза (наоборот):
3) Когда пользователь создается в облачном приложении, пользователь, добавленный в DynamoDB, также должен быть создан в SQL Server.
Ниже приведены несколько вещей, которые я проверил:
Служба переноса данных AWS. Мне показалось, что изначально это массовая миграция данных, т. е. только этап 1. Можем ли мы сделать непрерывную миграцию данных, используя это?
Я слышал, что могу добавить новые обновления базы данных в SQS, и они будут перенесены в другую базу данных.
Мне нужен совет по методам проектирования для достижения этой цели.
Ответы 1
Как вы уже знаете, первую часть можно легко выполнить, но вы не можете использовать ее для двух других фаз.
Ниже приведены варианты, которые вы можете примерить: 1- напишите небольшую функцию в самом коде .net для выполнения обеих фаз 2 и 3 при любом триггере данных, который вам нужен.
2- Создайте хранимую процедуру с триггерным событием в обеих базах данных, чтобы скопировать вновь введенные данные наоборот.
3- SQS можно использовать, но это будет дорогостоящая операция и потребует больше времени для внедрения, так как вам нужна непрерывная подача.
Поэтому выберите тот, который соответствует вашим потребностям и требованиям архитектуры.
Спасибо
Если база данных не занята и не влияет на производительность вашего приложения, то все в порядке. Но обратите внимание, что это очень высокий подход к обработке — опрос. Так что советую заменить на что-то получше.
У меня есть служба Windows, которая продолжает опрашивать таблицу БД на предмет любых изменений. Если есть изменение, он вызывает API, который переносит данные. Оно работает. Но хороший ли это подход?