LM head

LM head

Определение

Линейный слой, проецирующий скрытое представление (d_model) на размер словаря (vocab_size) для получения logits, используемый в logit lens.

Где встречается

Навигация