#python #nlp #gpt-2
Вопрос:
В своей программе я взял начальную часть предложения (например, «Топографическая карта в первую очередь связана с») и использовал GPT-2 для создания списка потенциальных окончаний предложения. Как я могу оценить эти два фактора для сгенерированного вывода (с использованием Python): является ли сгенерированное окончание семантически релевантным началу и является ли все предложение (начало окончание) плавным и естественным.
Спасибо!
Комментарии:
1. Пожалуйста, задавайте непрограммные вопросы по datascience.stackexchange.com или stats.stackexchange.com . Лучшим вариантом было бы попросить человека-аннотатора оценить каждый вывод из образца. Еще лучше, если будет несколько аннотаторов. Если это невозможно, единственный вариант-использовать реальный текст и наблюдать за вероятностью истинного окончания, предсказанного системой. Все остальное не было бы надлежащей оценкой.