LSTM中的长期记忆和短时记忆

Question

如何将数据归类为长期记忆和短期记忆？有程序员设定的标准吗？

Answer 1

我建议你读http://colah.github.io/posts/2015-08-Understanding-LSTMs/

从根本上说，长期内存和短期内存反映在LSTM网络的结构中.请看一下我提到的网站上的图表。

长期内存是在顶部的“总线”中构造的，其中可以传递前一个值，这取决于$\sigma$值。$\sigma$介于$$和$0$ means之间--忘记最后一个值，$1美元表示--从最后一个状态获得所有(准确)值。在训练阶段为每个单元建立西格玛。