#java #apache-spark #avro
Вопрос:
Пытаясь прочитать файлы avro в Apache Spark, я получил эту ошибку:
java.lang.Ошибка noSuchMethod: ‘логическая организация.apache.spark.sql.внутренняя.SQLConf.avroFilterPushDown()’
Комментарии:
1. Пожалуйста, отредактируйте вопрос, чтобы ограничить его конкретной проблемой с достаточной детализацией для определения адекватного ответа.
Ответ №1:
Эта ошибка произошла со мной, потому что я использовал более старую версию (3.0.1), в которой не существует этой новой конфигурации. После обновления локальной версии spark до 3.1.2 проблема была устранена