Блог

У меня есть проблема, чтобы применить AWS Glue к моему проекту, чтобы увидеть, возможно ли это на клею

-У меня есть база данных AWS RDS Postgresql и DW Resdhift

-Я хочу загружать данные из Postgresql в Redshift, но не полностью загружаться все время. Поэтому я считаю целесообразным применить нижеприведенную логику:

Я создал представление с идентификатором,хэш-ключом(объединить все столбцы и хэш MD5) и другими столбцами, а затем загрузить идентификатор и хэш-ключ в Redshift

После этого sql-скрипт на Redshift, чтобы определить, какие новые/обновленные записи, затем AWS glue просто возвращается в базу данных Postgresql и загружает новые/обновленные записи. Игнорируйте записи без обмена.

Может ли кто-нибудь помочь подтвердить, можно ли нанести это на клей?

Спасибо,