#streamsets
Вопрос:
Можно ли добавить текстовые поля (/аннотации) в конвейер SDC (v3.8.2)? Я хочу иметь возможность написать заметку, описывающую, что делают несколько различных частей конвейера.
Ответ №1:
Вы можете использовать фрагменты, если используете концентратор управления наборами потоков. И дайте им собственные имена.
Если вы не используете концентратор управления, вы можете попробовать использовать этапы оркестровки для вызова других конвейеров. https://streamsets.com/documentation/datacollector/latest/help/datacollector/UserGuide/Orchestration_Pipelines/OrchestrationPipelines_Title.html#Orchestrators_Title
Поэтому в основном разделите свою логику на несколько конвейеров и создайте конвейер «оркестровки», который будет их вызывать.
Комментарии:
1. Спасибо за подробный ответ. Не совсем то, на что я надеялся (простой способ аннотировать конвейер), но он кажется настолько близким, насколько это возможно : / так что отмечайте, как ответили.