#kubernetes #apache-kafka
#кубернетес #апач-кафка
Вопрос:
У меня есть вариант использования для развертывания различных соединителей в потоковом флоте для переноса данных из кафки в разные пункты назначения(например, в другую Кафку, базы данных. и т.д.). У Кафки есть эти соединители, и мне интересно, как организовать эти образы соединителей в одном флоте в зависимости от спроса. скажем, если я хочу направить данные для topicA в es и для topicB в hdfs, оркестратор прочитает две вышеуказанные задачи и вызовет работников для передачи данных в разные пункты назначения. но я не знаю, есть ли у kubernetes встроенная функция или плагины, которые действуют как вышеприведенный оркестратор?
Комментарии:
1. Я не знаю конкретно о k8s, но, например, запуск Apache Nifi может это сделать. Или вы можете использовать CRD Kafka Connect от Strimzi для развертывания этих вещей