Создание таблицы в spark занимает много времени

#pyspark #databricks #delta-lake Вопрос: У нас есть скрипт databricks для создания таблиц, подобный этому, finalDF.write.format('delta').option("mergeSchema", "true").mode('overwrite').save(table_path) spark.sql("CREATE TABLE IF NOT EXISTS {}.{} USING DELTA LOCATION '{}' ".format('GOLDDB', table, table_path)) Таким…