LLaMA-13B

Определение

LLaMA-13B — это версия большой языковой модели LLaMA (Large Language Model Meta AI), разработанная компанией Meta, содержащая 13 миллиардов параметров. Модель имеет размерность скрытого состояния d_model = 4096, что делает её эффективной для задач обработки естественного языка. LLaMA-13B часто используется в исследованиях и приложениях, где требуется баланс между производительностью и вычислительными ресурсами.

Где встречается

• 952. Что такое LoRA (Low-Rank Adaptation)? Объясните математическую идею: W' = W + BA

Навигация

• Индекс терминов
• Индекс разборов
• Оглавление