Блог

Мне нужно экспортировать данные, которые у меня есть в базе данных Google Cloud SQL Server, в BigQuery, чтобы провести некоторый анализ данных и создать отчеты. Я обнаружил, что рекомендуемый способ сделать это-использовать BigQuery Cloud SQL federated query , но это не поддерживает базу данных SQL Server, только MySQL и Postgres в службе Google Cloud SQL.

Я ищу способ сделать это с помощью облачных ресурсов Google, возможно, с помощью пакетного ETL-инструмента или потокового. Требование состоит в том, чтобы данные в BigQuery обновлялись в режиме реального времени или почти в режиме реального времени. Я довольно новичок в Google Cloud.

Напишите контекст клиент-сервера Pubsub, который можно опубликовать в теме Pubsub. Этот клиент будет использоваться для (1) Работника, когда он завершит создание анализа, и (2) Экспортера, когда он завершит экспорт данных. вы можете перейти по этой ссылке