#mongodb #pyspark #aws-glue #aws-glue-spark
Вопрос:
Я пытаюсь импортировать данные из MongoDB в задание AWS glue, а затем в redshift, но при выполнении загрузки из MongoDB я получаю это странное исключение, есть ли способ устранить эту проблему?
AnalysisException: Found duplicate column(s) in the data schema: `column1`, `column2`, `column3` После погугления в нем говорится, что если документ содержит дубликат столбца в любом месте схемы, он выйдет из строя, есть какие-либо подсказки, как с этим справиться?!