S4
S4
Определение
Классическая архитектура State Space Model со статическими матрицами A, B, C, лежащая в основе более современных SSM, таких как Mamba.
Где встречается
- 713. Как работает Mamba (State Space Model) и чем она лучше трансформера
- 716. Когда SSM-архитектуры (Mamba, StripedHyena) лучше трансформеров для long context
- 59. Сравнить архитектуры на reasoning задачах