synthetic eval collapse
synthetic eval collapse
Определение
Деградация качества оценки модели, когда синтетические тестовые данные перестают отражать реальное распределение задач, что приводит к потере корреляции между синтетической и реальной оценкой.