Блог

Я использую библиотеку singer tap-zendesk и хочу извлекать данные из определенных схем.

Я выполняю следующую команду в режиме синхронизации:

 tap-zendesk --config config.json --catalog catalog.json.
  

В настоящее время мой файл config.json имеет следующие параметры:

 {
    "email": "<email>",
    "api_token": "<token>",
    "subdomain": "<domain>",
    "start_date": "<start_date>"
  }
  

Мне удалось извлечь данные, указав ‘selected’: true в разделе схема, свойства и метаданные в файле catalog.json. Но мне было интересно, есть ли более простой способ сделать это? Мне нужно пройти около 15 потоков.

Мне удается получить файл catalog.json с помощью команды режима обнаружения:

 tap-zendesk --config config.json --discover > catalog.json
  

Вывод выглядит примерно следующим образом, но это означает, что я должен пойти и добавить selected:True в каждое поле.

 {
  "streams": [
    {
      "stream": "tickets",
      "tap_stream_id": "tickets",
      "schema": {
        **"selected": "true"**,
        "properties": {
          "organization_id": {
            **"selected": "true"**,},
      "metadata": [
        {
          "breadcrumb": [],
          "metadata": {
            **"selected": "true"**
  

}

Selected=true необходимо применять только один раз для каждого потока. Это необходимо добавить в раздел метаданных под потоком, где breadcrumbs = [] . Это очень плохо документировано.

Пожалуйста, посмотрите это сообщение в блоге для получения некоторых полезных сведений: https://medium.com/getting-started-guides/extracting-ticket-data-from-zendesk-using-singer-io-tap-zendesk-57a8da8c3477