Platt scaling
Platt scaling
Определение
Метод калибровки вероятностей через логистическую регрессию на валидационных данных, применяемый к логитам LLM для устранения overconfidence.
Где встречается
- 132. Как вы калибруете LLM-судью под человеческие оценки
- 291. Как вы измеряете uncertainty в ответах LLM (logit-based vs ensemble methods)
- 294. Как вы калибруете вероятности LLM для classification задач
- 348. Что такое calibration ошибок модели и как ее измерять (ECE, MCE, Brier score)
- 375. Как вы калибруете retrieval confidence для threshold-based filtering
- 397. Как вы делаете агента, который может «просить помощи» у другого агента или человека
- 487. Что такое calibration ошибок модели и как ее измерять (ECE, MCE, Brier score)
- 507. Что такое calibration в контексте reward model для RLHF
- 872. Что такое calibration для LLM и как её измерять (ECE)
- 800+ вопросов