Hallucination rate

Определение

Метрика качества генеративных моделей, показывающая долю ответов, содержащих фактические ошибки или вымышленные сведения (галлюцинации). Обычно вычисляется автоматическими детекторами, которые сравнивают сгенерированный текст с эталонными источниками. Высокий уровень галлюцинаций указывает на низкую достоверность модели и необходимость дополнительного обучения.

Где встречается

• 967. Как вы бенчмарките fine-tuned модель: на удержанном датасете, на out-of-distribu

Навигация

• Индекс терминов
• Индекс разборов
• Оглавление