Настройка подключения блоков данных

#databricks #databricks-connect

#Блоки данных #databricks-подключение

Вопрос:

После запуска databricks-connect configure , когда я запускаю databricks-connect test , я получаю "The system cannot find the path specified." , а затем ничего не происходит, никаких ошибок нет. Пожалуйста, помогите мне решить эту проблему. Поскольку сообщения об ошибке также нет, мне также не хватает информации о том, что нужно искать в Google. введите описание изображения здесь

Ответ №1:

Обновление: я решил эту проблему, сопоставив JAVA versions . Databricks runtime В кластере есть 6.5 и при проверке документации сказано JAVA 1.8.0_252 , и поэтому мне пришлось искать версию, более близкую к этой, и сейчас она работает (обе JDK и JRE работают). Однако есть еще одно предостережение. Для таблиц, принадлежащих озеру данных, я все еще не могу заставить его работать с sparklyr::spark_read_parquet(sc = sc, path = "/.../parquet_table", header = TRUE, memory = FALSE) ним, он работает для таблиц, принадлежащих "default" базе databricks данных. Не уверен, что это только в моем случае, но я устал от всех настроек, которые я делал за последнюю неделю, лол. Пожалуйста, прокомментируйте, смог ли кто-нибудь заставить это работать!

Ответ №2:

Один из советов заключается в том, что у вас есть JDK 15

Комментарии:

1. Проблема заключалась в версии Java.