#machine-learning #chatbot #metrics #rasa
#машинное обучение #чат-бот #метрики #rasa
Вопрос:
В настоящее время я сравниваю несколько конфигураций NLU в рамках Rasa.
Я хотел бы знать, что it означает значение in it/s , отображаемое в журнале при обучении или оценке конфигурации в Rasa. Может быть, итерации? Что именно говорит нам эта метрика?
Пример из недавнего журнала (метрика используется в конце строки):
2020-11-22 17:04:37 INFO rasa.nlu.test - Running model for predictions: 100%|██| 83/83 [00:00<00:00, 182.72it/s]
Я ничего не смог найти, погуглив и поискав на форумах.
Я также задавал тот же вопрос на форумах rasa раньше, но, похоже, активности практически нет.
Ответ №1:
it/s это не показатель (специфичный для Rasa или ML), это просто итерации в секунду, выполняемые системой (здесь на этапе прогнозирования).
Как правило, вы можете иметь в виду, что ничего действительно важного (и, конечно же, ни одной метрики) не ожидается, что сообщение будет сообщено через INFO сообщение в журналах; it/s это просто такое информационное указание и, как уже было сказано, не показатель.