Reliability diagram
Reliability diagram
Определение
График, отображающий предсказанную уверенность модели против фактической точности, используемый для визуализации калибровки.
Где встречается
- 294. Как вы калибруете вероятности LLM для classification задач
- 348. Что такое calibration ошибок модели и как ее измерять (ECE, MCE, Brier score)
- 375. Как вы калибруете retrieval confidence для threshold-based filtering
- 487. Что такое calibration ошибок модели и как ее измерять (ECE, MCE, Brier score)
- 507. Что такое calibration в контексте reward model для RLHF
- 872. Что такое calibration для LLM и как её измерять (ECE)