#google-cloud-platform #google-cloud-dataproc #google-cloud-data-fusion
#google-cloud-platform #google-cloud-dataproc #google-cloud-data-fusion
Вопрос:
Я использую DataFusion Enterprise.
Datafusion> системный администратор> конфигурация> профили системных вычислений> создать новый профиль
на этом маршруте я устанавливаю значение конфигурации главного узла, рабочего узла.
И я устанавливаю конфигурацию для каждого конвейера данных. (Исполнитель, драйвер)
Теперь при развертывании и запуске конвейера данных состояние подготовки не переходит к следующему этапу запуска.
Проблема заключается в следующем.
1.Dataproc
CreateCluster
asia-northest3:cdap-eventgmkt-7e769e35-182d-11b-9d9d-ce8dcdf883
service-125051400193@gcp-sa-datafusion.iam.gserviceaccount.com
Multiple Errors: - Timeout waiting for instance cdap-eventgmkt-7e769e35-182d-11b-9d9d-ce8dcdf88803-m to report in. - Timeout waiting for instance cdap-eventgmt-7769-9d-1d-1d1
- Dataproc
DeleteCluster
asia-northest3:cdap-eventgmkt-7e769e35-182d-11b-9d9d-ce8dcdf883
service-125051400193@gcp-sa-datafusion.iam.gserviceaccount.com
Cannot delete cluster 'cdap-eventgmkt-7e769e35-182d-11eb-9d9d-ce8dcdf88803' when it has other pending delete operations.
Короче говоря, конвейер данных запущен, но он больше не подготавливается.
Как вы решаете эти проблемы?
Спасибо.
Комментарии:
1. Это может произойти по целому ряду причин. Вы пробовали проверять журналы создания Dataproc? Они могут содержать дополнительную информацию о том, почему она не была создана успешно. Какую версию Cloud Data Fusion вы используете?
2. Удалось ли вам найти решение проблемы? Если да, пожалуйста, поделитесь этим в сообщении, чтобы другие пользователи, столкнувшиеся с той же проблемой, могли извлечь из этого пользу. Если нет, следуйте совету Денниса и найдите журналы создания Dataproc или другие журналы конвейера, которые помогут устранить проблему. Поделитесь любыми журналами, которые, как вы подозреваете, могут быть причиной, чтобы мы могли помочь и рассмотреть возможность обращения в службу поддержки облачной платформы Google, если вы не можете отладить ее самостоятельно.