online-метрики
online-метрики
Определение
Бизнес-метрики на реальном трафике (user satisfaction, CTR, task success rate) или метрики, оцениваемые LLM-судьёй.
Где встречается
- 5. Как вы оцениваете качество retrieval'а в RAG-системе
- 383. Что такое error budget для AI качества и как его считать
- 876. Как избежать evaluation overfitting (когда модель учится на тесте)
- 800+ вопросов