Spark 2.4.3 не может считывать файлы avro версии 1.9.2

#scala #apache-spark #avro #spark-avro

Вопрос:

Spark 2.4.3 (который внутренне использует Avro 1.8.2) не может прочитать файл Avro версии 1.9.2 (созданный платформой Kafka connect Confluent 6.1.2)

Наша работа spark, которая выполнялась в течение последнего года, теперь застревает на несколько дней без каких-либо ошибок.