Служба Azure поддерживает приемник дельта-формата в потоке данных ADF

#azure #azure-data-factory #azure-databricks #azure-purview

#azure #azure-data-factory #azure-databricks #azure-область применения

Вопрос:

Недавно я изучал Azure Purview и пытался перенести информацию о происхождении из ADF в Azure purview. Однако, похоже, когда мы передаем данные в дельта-формате, используя поток данных в ADF (который является встроенным форматом для потока данных), он не фиксирует информацию о происхождении. Принимая во внимание, что он фиксирует информацию о происхождении при потоке с использованием «dataset» в формате «Parquet». Может быть, я что-то здесь упускаю, или это ошибка или особенность, которую необходимо устранить?

Ответ №1:

Происхождение Delta Lake из потока данных ADF в настоящее время не поддерживается в Azure Purview. Это известное ограничение, и мы работаем над его устранением. В настоящее время нет ETA.