101
правка
Изменения
→Архитектура
Структура ''LSTM'' блока:
# ''MaskB'' слой ''input-to-state'' <tex>K_{is}</tex> учитывает контекст из входа.
# Сверточный слой ''inputstate-to-state'' <tex>K_{ss}</tex> учитывает контекст из предыдущих скрытых слоев.
Используя эти два сверточных слоя формально вычисление ''LSTM'' блока можно записать следующим образом:
<tex>c_i</tex> {{---}} вектор долгосрочной памяти,
<tex>K_{is}</tex> и <tex>K_{ss}</tex> {{---}} ядерные веса компонент ''input-to-state'' и ''inputstate-to-state'' соответственно.
=== Архитектура PixelRNN ===
