Ansible — извлечение данных из вложенного словаря JSON для анализа

#python #dictionary #ansible

#python #словарь #ansible

Вопрос:

У меня есть анализатор Ansible, который анализирует некоторые выходные данные CLI в приведенный ниже JSON, ниже приведен пример только для одного маршрутизатора

 {
    "ansible_facts": {
        "bgp_summary_facts": [
            {
                "65001_10.10.10.1": {
                    "Data": {
                        "inq": "0",
                        "msgrcvd": "638",
                        "msgsent": "424",
                        "neighbor": "10.10.10.1",
                        "uptime": "01:35:54",
                        "peer_as": "65001",
                        "state": "2",
                        "tblver": "0",
                        "version": "4"
                    }
                }
            },
            {
                "65001_10.10.10.2": {
                    "Data": {
                        "inq": "0",
                        "msgrcvd": "208364",
                        "msgsent": "424",
                        "neighbor": "10.10.10.2",
                        "uptime": "3w1d",
                        "peer_as": "65001",
                        "state": "71",
                        "tblver": "0",
                        "version": "4"
                    }
                }
            },
            {
                "65002_10.10.20.1": {
                    "Data": {
                        "inq": "0",
                        "msgrcvd": "0",
                        "msgsent": "1",
                        "neighbor": "10.10.20.1",
                        "uptime": "never",
                        "peer_as": "65002",
                        "state": "Idle",
                        "tblver": "0",
                        "version": "4"
                    }
                }
            },
            {
                "65010": {
                    "Data": {
                        "inq": "0",
                        "msgrcvd": "22611",
                        "msgsent": "424",
                        "neighbor": "10.10.30.1",
                        "uptime": "2d11h",
                        "peer_as": "65010",
                        "state": "36",
                        "tblver": "0",
                        "version": "4"
                    }
                }
            }
        ]
    },
    "changed": false,
    "included": [
        "parsers/ios/show_ip_bgp_summary.yml"
    ]
}
  

Теперь я несколько дней ломал голову, искал и читал руководства о том, как теперь я могу извлекать фрагменты этих данных для анализа

на этом моя игра заканчивается, используя учебные пособия, я подумал, что попробую использовать JMESpath, чтобы заставить его работать, я перепробовал для этого множество форматов, я также пробовал перебирать элементы словаря, я попытался преобразовать свой анализатор для использования списка словарей вместо словаря словарей, к моему разочарованию, я ничего не добился.

моей конечной целью было бы обработать каждый словарь в цикле для выполнения анализа, самым простым было бы вывести, какие одноранговые узлы отключены (не имеют целого числа для состояния)

    - name: PROCESS RESULTS
     debug:
       msg: "{{ item }}"
     with_items: "{{ bgp_summary_facts | json_query('*.neighbor') }}"
  

пример конечной цели:

 RTR-01
neighbour 10.10.20.1 is down
RTR-02
neighbour 10.30.20.1 is down
  

или

RTR-01

 | neighbour  | bgp as | prefixes | uptime   |
|------------|--------|----------|----------|
| 10.10.10.1 | 65001  | 2        | 01:35:54 |
| 10.10.10.2 | 65001  | 2        | 3w1d     |
| 10.10.20.1 | 65002  |          | never    |
  

и так далее для каждого маршрутизатора

Комментарии:

1. Неясно, как определяются некоторые поля. какой prefixes столбец в вашей желаемой таблице? и «is down» выводится из state столбца?

2. прошу прощения, префиксы будут равны state, а значение down будет равно, если столбец prefixes не является целым числом

3. я вижу, я добавляю PB в качестве ответа

Ответ №1:

если я правильно понял требования, вот способ проанализировать переменные и получить перечисленные вами «решения».

PB с включенной тестовой переменной:

 ---
- hosts: localhost
  gather_facts: false
  vars:
    test_var:
      bgp_summary_facts:
      - 65001_10.10.10.1:
          Data:
            inq: "0"
            msgrcvd: "638"
            msgsent: "424"
            neighbor: 10.10.10.1
            uptime: "01:35:54"
            peer_as: "65001"
            state: "2"
            tblver: "0"
            version: "4"
      - 65001_10.10.10.2:
          Data:
            inq: "0"
            msgrcvd: "208364"
            msgsent: "424"
            neighbor: 10.10.10.2
            uptime: 3w1d
            peer_as: "65001"
            state: "71"
            tblver: "0"
            version: "4"
      - 65002_10.10.20.1:
          Data:
            inq: "0"
            msgrcvd: "0"
            msgsent: "1"
            neighbor: 10.10.20.1
            uptime: never
            peer_as: "65002"
            state: Idle
            tblver: "0"
            version: "4"
      - "65010":
          Data:
            inq: "0"
            msgrcvd: "22611"
            msgsent: "424"
            neighbor: 10.10.30.1
            uptime: 2d11h
            peer_as: "65010"
            state: "36"
            tblver: "0"
            version: "4"
    changed: false
    included:
    - parsers/ios/show_ip_bgp_summary.yml


  tasks:
  - name: print var
    debug:
      msg: "bgp: {{ item.keys() | first }}, Neighbor: {{ item[item.keys() | first].Data['neighbor'] }}, uptime: {{ item[item.keys() | first].Data['uptime'] }}"
    with_items: "{{ test_var.bgp_summary_facts }}"

  - name: print var is down
    debug:
      msg: "is down"
    when: item[item.keys() | first].Data['state'] | int == false
    with_items: "{{ test_var.bgp_summary_facts }}"
  

я написал 2 debug задачи для удобства. если вы хотите создать таблицу, как в вашем примере, вам, вероятно, следует использовать задачу шаблона jinja.

Результат:

 [http_offline@greenhat-29 tests]$ ansible-playbook  test.yml 

PLAY [localhost] *******************************************************************************************************************************************************************************************************

TASK [print var] *******************************************************************************************************************************************************************************************************
ok: [localhost] => (item={'65001_10.10.10.1': {'Data': {'inq': '0', 'msgrcvd': '638', 'msgsent': '424', 'neighbor': '10.10.10.1', 'uptime': '01:35:54', 'peer_as': '65001', 'state': '2', 'tblver': '0', 'version': '4'}}}) => {
    "msg": "bgp: 65001_10.10.10.1, Neighbor: 10.10.10.1, uptime: 01:35:54"
}
ok: [localhost] => (item={'65001_10.10.10.2': {'Data': {'inq': '0', 'msgrcvd': '208364', 'msgsent': '424', 'neighbor': '10.10.10.2', 'uptime': '3w1d', 'peer_as': '65001', 'state': '71', 'tblver': '0', 'version': '4'}}}) => {
    "msg": "bgp: 65001_10.10.10.2, Neighbor: 10.10.10.2, uptime: 3w1d"
}
ok: [localhost] => (item={'65002_10.10.20.1': {'Data': {'inq': '0', 'msgrcvd': '0', 'msgsent': '1', 'neighbor': '10.10.20.1', 'uptime': 'never', 'peer_as': '65002', 'state': 'Idle', 'tblver': '0', 'version': '4'}}}) => {
    "msg": "bgp: 65002_10.10.20.1, Neighbor: 10.10.20.1, uptime: never"
}
ok: [localhost] => (item={'65010': {'Data': {'inq': '0', 'msgrcvd': '22611', 'msgsent': '424', 'neighbor': '10.10.30.1', 'uptime': '2d11h', 'peer_as': '65010', 'state': '36', 'tblver': '0', 'version': '4'}}}) => {
    "msg": "bgp: 65010, Neighbor: 10.10.30.1, uptime: 2d11h"
}

TASK [print var is down] ***********************************************************************************************************************************************************************************************
skipping: [localhost] => (item={'65001_10.10.10.1': {'Data': {'inq': '0', 'msgrcvd': '638', 'msgsent': '424', 'neighbor': '10.10.10.1', 'uptime': '01:35:54', 'peer_as': '65001', 'state': '2', 'tblver': '0', 'version': '4'}}}) 
skipping: [localhost] => (item={'65001_10.10.10.2': {'Data': {'inq': '0', 'msgrcvd': '208364', 'msgsent': '424', 'neighbor': '10.10.10.2', 'uptime': '3w1d', 'peer_as': '65001', 'state': '71', 'tblver': '0', 'version': '4'}}}) 
ok: [localhost] => (item={'65002_10.10.20.1': {'Data': {'inq': '0', 'msgrcvd': '0', 'msgsent': '1', 'neighbor': '10.10.20.1', 'uptime': 'never', 'peer_as': '65002', 'state': 'Idle', 'tblver': '0', 'version': '4'}}}) => {
    "msg": "is down"
}
skipping: [localhost] => (item={'65010': {'Data': {'inq': '0', 'msgrcvd': '22611', 'msgsent': '424', 'neighbor': '10.10.30.1', 'uptime': '2d11h', 'peer_as': '65010', 'state': '36', 'tblver': '0', 'version': '4'}}}) 

PLAY RECAP *************************************************************************************************************************************************************************************************************
localhost                  : ok=2    changed=0    unreachable=0    failed=0   

[http_offline@greenhat-29 tests]$ 
  

надеюсь, это поможет

Комментарии:

1. я получаю сообщение об ошибке «: «Задача включает опцию с неопределенной переменной. Ошибка заключалась в следующем: ‘dict object’ не имеет атрибута ‘Data’ nn Ошибка, по-видимому, была в ‘/Users/alexw/ansible/gather_bgp_summary.yml’: строка 27, столбец 6, но может быть и в другом месте файла в зависимости от конкретной синтаксической проблемы.nn Строка-нарушитель выглядит так:nnn — name: print var n ^ here n»

2. Я использую with_items: «{{ bgp_summary_facts }}»

3. ok: [lab-rtr-01] => { «ansible_facts»: { «bgp_summary_facts»: [ {

4. Я получаю вышеуказанное при запуске -vvv

5. да, вы правы, я играл с анализатором, чтобы попробовать разные методы, чтобы заставить его работать, я изменил его, и он работает

Ответ №2:

Я создал шаблон jinja2 для вышеупомянутого. Результат похож, но у меня есть некоторая путаница в условиях, но я решил поделиться этим здесь.

Было бы неплохо, если бы вы могли объяснить на примере.


сборник пьес:

 - name: hosts
  hosts: localhost
  tasks:
    - name: include vars
      include_vars: vars_t4.yml

    - name: template module
      template:
        src: template/source.json
        dest: target/final.json
  

шаблон

 template:{% for i in bgp_summary_facts %}
{% for a in  i | dict2items  %}
RTR-{{ a.value.Data.inq }}
neighbour {{ a.value.Data.neighbor }} is down
{% endfor %}
{% endfor %}
  

вывод

 RTR-0
neighbour 10.10.10.1 is down

RTR-0
neighbour 10.10.10.2 is down

RTR-0
neighbour 10.10.20.1 is down

RTR-0
neighbour 10.10.30.1 is down