Можем ли мы выполнить sql-запрос в aws DMS
Можем ли мы выполнить sql-запрос внутри задачи DMS, чтобы он просто извлекал необходимые данные, а не всю базу данных. Если это невозможно, то какой сервис aws используется для получения данных на основе запросов из локального источника данных в aws S3.
Ответы 2
Вы можете использовать фильтры и/или исключать поля: https://docs.aws.amazon.com/dms/latest/userguide/CHAP_Tasks.CustomizingTasks.TableMapping.html
Свяжитесь со мной, если у вас есть проблемы.
В качестве альтернативного решения для DMS вы можете использовать AWS Glue с данными, полученными с помощью кадра данных PYSPARK из предварительной базы данных в s3 или AWS RDS. Это работает очень хорошо. Единственный минус - это стоимость.
Это решение поддерживает как таблицу, так и SQL в качестве входных данных для извлечения данных.
Какова ваша технология источника данных?