Clipping (ROUGE)

Определение

Клиппирование (clipping) в метрике ROUGE — это механизм, ограничивающий количество совпадений n-грамм между эталонным (референс) и сгенерированным текстами. Для каждой n-граммы подсчитывается её встречаемость в референсе и гипотезе, но в числитель формулы precision или recall засчитывается только минимум из этих двух значений. Это предотвращает завышение оценки за счёт многократного повторения одних и тех же n-грамм в ответе модели, делая метрику более устойчивой к «пустым» повторам.

Где встречается

• 909. Что такое метрика ROUGE (ROUGE-1, ROUGE-2, ROUGE-L)? Как она считается и в чем её недостатки для оценки генерации?

Навигация

• Индекс терминов
• Индекс разборов
• Оглавление