2017-11-10 132 views
-1

我对RNN和LSTM相当陌生,但花了相当多的时间从互联网上找到的各种资源中学习。我收集到的是,循环神经网络中的时间步长与前馈神经网络中的正向传递时间步长相同。但事实证明这是错误的。那这是什么 ?参考循环神经网络的时间步骤是什么?

回答

1

正向传递涉及完全通过网络运行一个数据项目(例如完整句子),直到项目被完全处理(即,我们具有分类输出)。

时间步是通道的一部分,其中节点输入被处理成输出,然后这些输出被馈送到下一个节点 - 通常反馈到先前的输入。

+0

所以你想说的是基本上前一层激活下一层是一个时间步骤。那么时间步长的“长度”是多少?我们如何控制它? –

+0

对 - 这是描述它的好方法。 “长度”由拓扑控制:感知器在一次输入到输出通道中处理什么单位的信息时间?我习惯于音频流将输入解析为不同大小的剪辑,每个剪辑长几毫秒,对应于一个子音素音素。文本流通常每次进行一个单词(忽略停用词)。 – Prune

+0

你描述了我们如何控制长度。但是时间步长是多少? –