StripedHyena

Определение

Гибридная архитектура нейронной сети, чередующая SSM-слои (Hyena) и слои внимания, сохраняющая линейную сложность при обработке длинных контекстов.

Где встречается

• 716. Когда SSM-архитектуры (Mamba, StripedHyena) лучше трансформеров для long context
• 800+ вопросов

Навигация

• Индекс терминов
• Индекс разборов
• Оглавление