Fluentd : запись не по порядку для потока

#logging #grafana #fluentd #grafana-loki

Вопрос:

Я новичок в ведении журнала fluentd. Я пытаюсь реализовать централизованное ведение журнала для своей архитектуры микросервиса. Я использую grafana , loki и fluentd вместе для своего стека журналов. Для меня некоторые строки журнала из нескольких микросервисов не видны в журналах графаны локи. Когда я заглянул в журналы для fluentd, я увидел следующую ошибку, которая, как я подозреваю, может быть основной причиной проблемы.

 2021-10-31 16:22:33  0000 [warn]: #0 failed to write post to http://LOKI_IP:3100/loki/api/v1/push (400 Bad Request entry with timestamp 2021-10-31 16:22:14  0000 UTC ignored, reason: 'entry out of order' for stream: {agent="fluentd", host="ward_workstation", job="varlogs"}, entry with timestamp 2021-10-31 16:22:20  0000 UTC ignored, reason: 'entry out of order' for stream: {agent="fluentd", host="ward_workstation", job="varlogs"},  

Может ли кто-нибудь помочь мне здесь решить эту проблему?

Спасибо за помощь.