Dense layer

Dense layer

Определение

Dense layer (полносвязный слой) — это базовый тип слоя в нейронных сетях, где каждый нейрон соединён со всеми нейронами предыдущего слоя. В таких слоях выполняется линейное преобразование входных данных с последующим применением функции активации. В контексте трансформеров dense layer часто используется в Feed-Forward Network (FFN) для нелинейного преобразования представлений.

Где встречается

Навигация