美文网首页算法程序员Machine Learning & Deep Learning
零基础入门深度学习(6) - 长短时记忆网络(LSTM)

零基础入门深度学习(6) - 长短时记忆网络(LSTM)

作者: 韩炳涛 | 来源:发表于2017-01-08 23:46 被阅读1291次

相关文章

    网友评论

    • 鼓楼馒头:非常感谢博主的详细讲解,我看了LSTM感觉学习到了很多,也解决了我的困扰,真的很感谢!
    • 轻墨lightink:梯度计算公式有遗漏,梯度还可以通过c的那条线传递到较早时间,导致计算出来的梯度总是小于实际值。作者可以将梯度检查的输入改为三个以上试试。
      轻墨lightink:https://github.com/shellhue/MachineLearning/blob/master/lstm.py给出了更正后的梯度计算,并通过了梯度检查,麻烦作者在文章中说明,以免误导读者。
    • dcc81e1262c3:请问为什么77-80式梯度需要求和,但是96-106式梯度不需要求和?
      韩炳涛:@hexj314159 您说的对,这个地方也是需要求和的。
    • a5634a75858e:第6篇关于LSTM的文章中,式13 中 的 连乘符号上下标出问题了,我觉得应该是 j取值=k~t,而不是类似RNN那篇中的取值k~t-1
    • 4c5802a34b59:先生的文章写得太好了,期待您的下一篇。

    本文标题:零基础入门深度学习(6) - 长短时记忆网络(LSTM)

    本文链接:https://www.haomeiwen.com/subject/mmovvttx.html