中文翻译暂不可用,显示俄语原文。
divergence
divergence
Определение
Нестабильность процесса обучения, проявляющаяся в резких скачках функции потерь или уходе лосса в бесконечность; часто вызвана проблемами с данными или неудачным подбором learning rate.
Где встречается
- 466. Что такое curriculum learning для LLM и как его реализовать
- 485. Как вы дебажите training instability (loss spikes, divergence)
- 800+ вопросов