#azure-data-factory #delta-lake #data-quality
Вопрос:
Реализуйте ограничение Дельта — таблицы и установите дельта-мини-сервер с помощью ADF Hi,
Наша компания создает дельта-таблицы в ADLS v2 с использованием фабрики данных Azure. Похоже, по умолчанию соединитель потока данных с дельта-отображением ADF создает дельта-таблицы с помощью minWriterVersion 2.
Два вопроса:
- Можем ли мы программно установить версию minWriterVersion на версию 3 или выше во время создания ADF новой таблицы или обновления существующей таблицы, или это то, что контролирует команда MS ADF?
- Предполагая, что для minWriterVersion дельта-таблицы установлено значение 3 или выше, какие
у нас есть варианты, если таковые имеются, для реализации ограничений дельта-таблицы,
в частности, Не нулевого, при использовании ADF для создания или обновления
дельта-таблиц в ADLS?