Как импортировать пользовательский пакет Python в Cloud Composer?

# #python #google-cloud-platform #airflow #google-cloud-composer

Вопрос:

Я учусь использовать Google Cloud Composer, и часть этого заключается в том, чтобы понять, как импортировать пользовательский пакет python нашей организации в dag. Я дошел до того, что могу импортировать простые скрипты, помещая их в папку зависимостей внутри папки dag, но это в значительной степени все.

Я не могу понять, как импортировать полный пакет, который содержит несколько сценариев, и где setup.py вступайте в игру при импорте. Как структурировать его в облачном хранилище и использовать в dag?

Комментарии:

1. Можете ли вы поделиться своим примером файловой структуры, которую вы пытаетесь загрузить в папку базы данных?

2. Возможно, вы также захотите ознакомиться с этой документацией о том, как импортировать пакеты Python из частных репозиториев