Scaling Laws

Определение

Эмпирические законы, связывающие размер модели, количество данных и вычислительные ресурсы; например, Chinchilla scaling laws.

Где встречается

• 680. Как работает Mixture of Experts (MoE) внутри LLM (спарсинг активации)

Навигация

• Индекс терминов
• Индекс разборов
• Оглавление