WinoGrande

Определение

WinoGrande — это бенчмарк для оценки способности языковых моделей к разрешению анафоры (определению референта местоимения) в контексте, требующем здравого смысла. Задачи состоят в выборе правильного антецедента для местоимения в предложении, где оба варианта грамматически корректны, но только один соответствует реальному миру. Бенчмарк широко используется для измерения общих способностей модели после применения RLHF.

Где встречается

• 995. Как вы проверяете, что RLHF улучшил модель на целевых задачах, но не сломал общие способности

Навигация

• Индекс терминов
• Индекс разборов
• Оглавление