multiple judges

Определение

Метод оценки с использованием нескольких LLM-судей (или экземпляров одной модели) для агрегации оценок. Позволяет снизить bias и повысить робастность оценок.

Где встречается

• 132. Как вы калибруете LLM-судью под человеческие оценки
• 343. Как вы измеряете и исправляете bias в LLM-as-Judge (self-enhancement, position, verbosity)
• 486. Почему LLM-as-Judge может быть biased Назовите 3 основных bias и как их детектировать.
• 493. Что такое Positional bias в LLM-as-Judge и как его исправить
• 870. Как работает LLM-as-judge и почему он biased
• 800+ вопросов

Навигация

• Индекс терминов
• Индекс разборов
• Оглавление