Elasticsearch не разрешает индексировать null в поле даты

#php #elasticsearch

#php #elasticsearch

Вопрос:

У меня есть нижеприведенные данные для индексации:

 array:6 [▼
  "index" => "my_index"
  "type" => "audit_field"
  "id" => "57f36d28a1dfc"
  "parent" => "57f36d289f1b2"
  "routing" => 318
  "body" => array:19 [▼
     "session_id" => 318
     "trans_seq_no" => 13
     "table_seq_no" => 13
     "field_id" => 65
     "field_name" => "id"
     "new_value" => 45
     "old_value" => 45
     "date_type_new_value" => null
     "date_type_old_value" => null
     "time_type_new_value" => null
     "time_type_old_value" => null
 ]
]
  

Я сам определил отображение как показано ниже

 array(
    'index' => 'promote_kmp',
    'type' => 'audit_field',
    'body' => [
        'audit_field' => [
            '_source' => [
                'type' => 'string'
            ],
            "_parent" => [
                "type" => "audit_table"
            ],
            'properties' => [
                'session_id'   => array('type' =>  'string'),
                'trans_seq_no' => array('type' =>  'string'),
                'table_seq_no' => array('type' =>  'string'),
                'field_id'     => array('type' =>  'string'),
                'field_name'   => array('type' => 'string'),
                'old_value'    => array(
                    'type' => 'string'
                ),
                'new_value'    => array(
                    'type' => 'string'
                ),
                'date_type_new_value' => array(
                    'type'   => 'date',
                    'format' =>'YYYY-MM-dd HH:mm:ss||YYYY-MM-dd||MM/dd/yyyy||yyyy/MM/dd'
                ),
                'date_type_old_value' => array(
                    'type'   => 'date',
                    'format' =>'YYYY-MM-dd HH:mm:ss||YYYY-MM-dd||MM/dd/yyyy||yyyy/MM/dd'
                ),
                'time_type_new_value' => array(
                    'type'   => 'date',
                    'format' => 'HH:mm:ss'
                ),
                'time_type_old_value' => array(
                    'type'   => 'date',
                    'format' => 'HH:mm:ss'
                )
            ]
        ]
    ]
);
  

Но когда я хочу индексировать данные с помощью null в поле даты, elasticsearch показывает и исключение, которое не может проанализировать значение поля даты с отображением типов формата даты.
Как это решить, я также пробовал с пустым, но не работает, и выдает то же сообщение.

 MapperParsingException[failed to parse [date_type_new_value]]; nested: 
MapperParsingException[failed to parse date field [], tried both date format 
[YYYY-MM-dd HH:mm:ss||YYYY-MM-dd||MM/dd/yyyy||yyyy/MM/dd], and timestamp 
number with locale []]; nested: IllegalArgumentException[Invalid format: ""];
  

Ответ №1:

В ES 7 у вас есть возможность указать null_value в качестве свойства поля. Однако поиск значений Null невозможен. См. Страницу руководства по настройке значений null null_value и страницу руководства по датам для типа данных даты.

Ответ №2:

Я не уверен, почему null не работает, я могу индексировать значение null в ES 1.7, также IllegalArgumentException[Invalid format: ""]; указывает пустую строку, а не нулевое значение.

Если у вас нет контроля над данными, вам нужно использовать ignore_malformed, который не будет индексировать поле даты, но индексировать документ обычным образом.

Комментарии:

1. У меня есть контроль над данными, я передал значение null, но отображается эта ошибка. Я использую ту же версию elastic.

2. Это странно, не могли бы вы попробовать добавить ignore_malformed к отображению?