Верхний параметр REST API Azure DevOps в сценарии PowerShell не работает

#powershell #azure-devops #azure-powershell #rest #azure-devops-rest-api

Вопрос:

У меня есть приведенный ниже сценарий для создания отчета о выпусках из проекта Azure DevOps.

 $token="**************************************************************"

$url="https://dev.azure.com/{orgnization}/_apis/projects?api-version=6.0"

$token = [System.Convert]::ToBase64String([System.Text.Encoding]::ASCII.GetBytes(":$($token)"))



$response = Invoke-RestMethod -Uri $url -Headers @{Authorization = "Basic $token"} -Method Get -ContentType application/json

Foreach($projectName in $response.value.name)
{
  
  $url1="https://vsrm.dev.azure.com/{orgnization}/$($projectname)/_apis/release/releases?api-version=6.0"
 
  $response = Invoke-RestMethod -Uri $url1 -Headers @{Authorization = "Basic $token"} -Method Get -ContentType application/json-patch

  
   echo $response | ConvertTo-Json -Depth 99 |  Out-File "D:\file.json" -Append

}
 

В этом скрипте первый API возвращает всего 100 записей. Когда я попытался добавить верхний параметр, чтобы вернуть больше записей, как показано ниже, это ничего не меняет. Я что-то здесь делаю не так?

 https://dev.azure.com/uniperteamservices/_apis/projects?api-version=6.0amp;$top=500
 

Можете ли вы подсказать, как я могу добавить верхний параметр в URL-адрес REST API, который может выполняться в моем приведенном выше сценарии PowerShell?

Ответ №1:

Обязательно экранируйте значение $ в строке запроса, иначе PowerShell попытается ввести значение любой переменной top , которую содержит вызываемая переменная:

 $urlBase="...?api-version=6.0amp;`$top=5"
                              ^^^^^
 

$top= временами это было непросто. Это может дать или не дать вам запрошенное количество элементов, похоже, это зависит от того, насколько занят сервер. Но это обещает вам следующее: все остальные API вернут x-ms-continuation-token заголовок рядом с полезной нагрузкой, и вы можете использовать его для получения следующей партии элементов:

введите описание изображения здесь

Вы можете получить следующую партию проектов, запросив точно такой же запрос REST и добавив параметр amp;continuationtoken=${ms-continuation-token} запроса в вызов. Повторяйте это до тех пор, пока сервер не прекратит отправку x-ms-continuation-token заголовка, что означает, что вы получили все значения, которые вам были нужны.

Вы можете захватить заголовки, передав вторую переменную:

 $urlBase="https://dev.azure.com/jessehouwing/_apis/projects?api-version=6.0amp;`$top=5"

$url = $urlBase
$results = @();

do 
{
    write-host "Calling API"
    $response = Invoke-RestMethod -Uri $url -Headers @{Authorization = "Basic $token"} -Method Get -ContentType application/json -ResponseHeadersVariable headers
    $results  = $response.value

    if ($headers["x-ms-continuationtoken"])
    {
        $continuation = $headers["x-ms-continuationtoken"]
        write-host "Token: $continuation"
        $url = $urlBase   "amp;continuationtoken="   $continuation
    }
} while ($headers["x-ms-continuationtoken"])

$results
 

Покажет:

 Calling API
Token: 5
Calling API
Token: 10
Calling API

id             : 06cb494c-b535-4f16-9323-bd0f63c38163
name           : CMMI
url            : https://dev.azure.com/jessehouwing/_apis/projects/06cb494c-b535-4f16-9323-bd0f63c38163
state          : wellFormed
revision       : 414360096
visibility     : private
lastUpdateTime : 08/07/2019 20:19:09

id             : 88a7ca79-b5c8-41d2-99e7-a5578a1df424
name           : BattleJSip
description    : Battleship case in JS/TS
url            : https://dev.azure.com/jessehouwing/_apis/projects/88a7ca79-b5c8-41d2-99e7-a5578a1df424
state          : wellFormed
revision       : 414360059
visibility     : private
lastUpdateTime : 15/04/2018 13:43:44

... for 12 projects
 

В случае /projects конечной точки токен продолжения принимает предсказуемое значение количества проектов, которые необходимо пропустить. Другие API могут возвращать идентификатор GUID или строку в кодировке base64 или идентификатор последнего возвращенного элемента. Не делайте никаких предположений о содержимом токена, всегда копируйте его из заголовка и дословно вставляйте в следующий запрос.

напр.

 https://dev.azure.com/p/_apis/projects?api-version=6.0amp;$top=5

x-ms-continuation-token:5

{"count":5,"value":[{"id":"06cb494c-b535-4f16-9323-bd0f63c38163","name":"CMMI","url":"https://dev.azure.com/jessehouwing/_apis/projects/06cb494c-b535-4f16-9323-bd0f63c38163","state":"wellFormed","revision":414360096,"visibility":"private","lastUpdateTime":"2019-07-08T20:19:09.333Z"},{"id":"88a7ca79-b5c8-41d2-99e7-a5578a1df424","name":"BattleJSip","description":"Battleship case in JS/TS","url":"https://dev.azure.com/jessehouwing/_apis/projects/88a7ca79-b5c8-41d2-99e7-a5578a1df424","state":"wellFormed","revision":414360059,"visibility":"private","lastUpdateTime":"2018-04-15T13:43:44Z"},{"id":"f5ffbb7d-11bc-4e2f-93e0-e9ee8151b428","name":"CodeToCloud-Workshop","url":"https://dev.azure.com/jessehouwing/_apis/projects/f5ffbb7d-11bc-4e2f-93e0-e9ee8151b428","state":"wellFormed","revision":414360127,"visibility":"private","lastUpdateTime":"2020-10-01T18:21:03.913Z"},{"id":"6d4b20e3-4afc-4fb0-9dc9-f4b1d3ff150d","name":"Agile2017","url":"https://dev.azure.com/jessehouwing/_apis/projects/6d4b20e3-4afc-4fb0-9dc9-f4b1d3ff150d","state":"wellFormed","revision":414360110,"visibility":"private","lastUpdateTime":"2019-10-09T11:52:58.767Z"},{"id":"2031f1a3-c549-46f1-8c55-74390077a606","name":"jessehouwing.net","url":"https://dev.azure.com/jessehouwing/_apis/projects/2031f1a3-c549-46f1-8c55-74390077a606","state":"wellFormed","revision":414360067,"visibility":"private","lastUpdateTime":"2018-07-02T11:08:39.76Z"}]}
 

А потом следующий звонок

 https://dev.azure.com/p/_apis/projects?api-version=6.0amp;$top=5amp;continuationToken=5

x-ms-continuation-token:10

{"count":5,"value":[{"id":"a88536a2-a889-45a3-a955-ddf1af8aeba1","name":"azure-devops-extensions","description":"This projects hosts the pipelines for all my Azure DevOps marketplace extensions.","url":"https://dev.azure.com/jessehouwing/_apis/projects/a88536a2-a889-45a3-a955-ddf1af8aeba1","state":"wellFormed","revision":414360082,"visibility":"public","lastUpdateTime":"2019-06-28T09:48:16.943Z"},{"id":"a1627c96-8627-41c7-9c29-498d523517e0","name":"Agile","url":"https://dev.azure.com/jessehouwing/_apis/projects/a1627c96-8627-41c7-9c29-498d523517e0","state":"wellFormed","revision":414360119,"visibility":"private","lastUpdateTime":"2019-12-02T12:11:23.863Z"},{"id":"a57ce751-1dcc-4089-b850-359624e92977","name":"Torpydo","description":"Battleship case in Python","url":"https://dev.azure.com/jessehouwing/_apis/projects/a57ce751-1dcc-4089-b850-359624e92977","state":"wellFormed","revision":414360038,"visibility":"private","lastUpdateTime":"2017-11-19T19:06:20.23Z"},{"id":"73711003-5adb-4e06-a7bb-f1d12b29db42","name":"Actual Scrum","url":"https://dev.azure.com/jessehouwing/_apis/projects/73711003-5adb-4e06-a7bb-f1d12b29db42","state":"wellFormed","revision":414360069,"visibility":"private","lastUpdateTime":"2019-04-09T19:26:38.877Z"},{"id":"9c643486-32f0-44f5-a49b-900b72f8219b","name":"Test","url":"https://dev.azure.com/jessehouwing/_apis/projects/9c643486-32f0-44f5-a49b-900b72f8219b","state":"wellFormed","revision":414360078,"visibility":"private","lastUpdateTime":"2019-05-27T09:58:21.247Z"}]}
 

Получит проекты с 6 по 10 и отправит continuation-token ответ со значением 10 для следующего вызова.

До тех x-ms-continuation-token пор, пока заголовок больше не будет возвращен

 https://dev.azure.com/p/_apis/projects?api-version=6.0amp;$top=5amp;continuationToken=10

{"count":2,"value":[{"id":"6484ebc3-af16-4af9-aa66-6b3398db7214","name":"demo","description":"This team is  meant to be used for all kinds of great demos","url":"https://dev.azure.com/jessehouwing/_apis/projects/6484ebc3-af16-4af9-aa66-6b3398db7214","state":"wellFormed","revision":414360040,"visibility":"private","lastUpdateTime":"2018-02-08T04:57:49.15Z"},{"id":"c3eb1420-aa31-4610-9bb1-30b9e3496967","name":"OhhShitGit","url":"https://dev.azure.com/jessehouwing/_apis/projects/c3eb1420-aa31-4610-9bb1-30b9e3496967","state":"wellFormed","revision":414360050,"visibility":"private","lastUpdateTime":"2018-03-13T10:41:22.567Z"}]}
 

В блоге: Доступ к API-интерфейсам Azure DevOps с большими объемами данных

Комментарии:

1. Привет, Джесси, Спасибо за ваш ответ, но я не уверен, как его можно включить в мой сценарий PowerShell, потому что я не специалист в этом. Любая помощь будет оценена по достоинству

2. Обновил вопрос ниже о том, как захватить заголовок.

3. Приятная деталь в ответе. По первоначальному мнению Джесси, по моему опыту, это $top не сработает, если это явно не указано в документации конечной точки (и даже в этом случае реализация оставляет желать лучшего). Определенно было бы неплохо немного больше контролировать размер «страницы», но я думаю, что ms-continuation-token это лучшее, что вы получите для некоторых конечных точек. Безусловно, самый последовательный.