Input gate
Input gate
Определение
Input gate (входной вентиль) — один из ключевых компонентов LSTM-ячейки, который определяет, какая новая информация из текущего входа и предыдущего скрытого состояния будет записана в cell state. Он использует сигмоидный слой для выбора значений (от 0 до 1) и tanh-слой для создания кандидатов на обновление. Результат их поэлементного умножения добавляется к cell state.