Как скопировать данные из rest api с использованием oauth в хранилище больших двоичных объектов Azure в формате json с использованием adf

#azure-data-factory #azure-blob-storage

#azure-data-factory #azure-blob-storage

Вопрос:

У меня возникли трудности с созданием конвейера ADF, который извлекает данные из REST API с использованием OAuth и записывает их в хранилище больших двоичных объектов Azure в формате JSON. Я разработчик python и относительно новичок в adf. Я объясню более подробно ниже.

  1. Мне нужно получить токен доступа, отправив запрос на конечную точку токена. Этот шаг работает нормально. введите описание изображения здесь

  2. Мне нужно извлечь данные из API с помощью запроса GET в операции копирования. Также мне нужно включить разбивку на страницы. Что-то не так в том, как я определяю правила разбивки на страницы? «@odata.nextLink» — это полное описание ключа json; правильно ли это указано в разделе значений? введите описание изображения здесь

  3. Мне нужно скопировать данные в хранилище больших двоичных объектов в формате json. Я создал набор данных приемника.

введите описание изображения здесь

  1. После запуска конвейера он запрашивает 2 параметра конвейера, что я должен здесь написать?

введите описание изображения здесь

  1. Я получаю следующую ошибку, что я делаю не так?

введите описание изображения здесь

Комментарии:

1. Как показывает ошибка, ваши исходные данные имеют недопустимый формат JSON. Пожалуйста, проверьте это.

2. Я запустил скрипт на Python, где он работает отлично. Где я могу проверить JSON? Не удается запустить конвейер из-за ошибки

3. Вы можете использовать postman.