Долгая краткосрочная память (LSTM)
Эпоха: Возрождение · 1990-е–2010-е
Зепп Хохрайтер и Юрген Шмидхубер предложили LSTM — особый тип рекуррентной нейронной сети, способный обучаться долгосрочным зависимостям. LSTM добился большого успеха в распознавании речи и языковом моделировании.
Зепп Хохрайтер и Юрген Шмидхубер
Источники и подтверждения
Long Short-Term Memory
Neural Computation · Тип источника: paper
The original 1997 architecture uses memory cells, input gates, and output gates.
Опубликовано: ·Проверено:
Learning to Forget: Continual Prediction with LSTM
Neural Computation / PubMed · Тип источника: paper
The later paper introduces the forget gate.
Опубликовано: ·Проверено: