#google-cloud-dataflow
#google-cloud-поток данных
Вопрос:
мы запускаем шаблоны Python Flex для потока данных в VPC без подключения к исходящей сети и без хранилища артефактов. Следовательно, для заданий python с потоком данных мы предоставляем зависимости, как описано здесь: https://beam.apache.org/documentation/sdks/python-pipeline-dependencies/#local-or-nonpypi .
Как лучше всего предоставлять зависимости шаблонам Python Flex, когда процесс сборки, создающий образ docker, имеет доступ к PyPI, но у работников потока данных нет доступа?
Комментарии:
1. Столкнувшись с той же проблемой — вы нашли решение?