teacher-student
teacher-student
Определение
Парадигма дистилляции знаний, где модель-учитель передаёт знания модели-студенту, снижая смещение подтверждения и улучшая обобщение.
Где встречается
- 596. Как работает model stealing attack (экстракция модели через API)
- 274. Настроить self-training с псевдо-метками