Base frequency

Определение

Параметр RoPE, определяющий скорость вращения для каждого измерения (обычно 10000), влияющий на экстраполяцию на длинные контексты.

Где встречается

• 630. Как работает RoPE (Rotary Position Embeddings) для экстраполяции на длинные контексты

Навигация

• Индекс терминов
• Индекс разборов
• Оглавление