T5 relative bias

Определение

Относительное позиционное кодирование с фиксированным окном, используемое в модели T5.

Где встречается

• 278. Как работает RoPE (Rotary Position Embedding) и чем лучше абсолютных позиций

Навигация

• Индекс терминов
• Индекс разборов
• Оглавление