H3

Определение

Гибридная архитектура, комбинирующая state-space модели с механизмом внимания и межслойными связями.

Где встречается

• 299. Как работает attention между слоями (cross-layer attention) в современных архитектурах
• 626. Как работают современные long-context LLM (GPT-4 1M, Claude 200k, Gemini 2M)
• 800+ вопросов

Навигация

• Индекс терминов
• Индекс разборов
• Оглавление