Progressive training
Progressive training
Определение
Метод обучения, при котором сложность данных или задач увеличивается постепенно: от коротких последовательностей к длинным, от простых инструкций к сложным. Применяется для эффективного обучения LLM.
Где встречается
- 466. Что такое curriculum learning для LLM и как его реализовать
- 477. Что такое curriculum learning на уровне данных для LLM
- 681. Как вы генерируете синтетический датасет для instruction tuning Self-instruct, Evol-Instruct