当前位置:首页 > 编程笔记 > 正文
已解决

11 Self-Attention相比较 RNN和LSTM的优缺点

来自网友在路上 161861提问 提问时间:2023-10-24 05:23:47阅读次数: 61

最佳答案 问答题库618位专家为你答疑解惑

博客配套视频链接: https://space.bilibili.com/383551518?spm_id_from=333.1007.0.0 b 站直接看
配套 github 链接:https://github.com/nickchen121/Pre-training-language-model
配套博客链接:https://www.cnblogs.com/nickchen121/p/15105048.html

RNN

img

无法做长序列,当一段话达到 50 个字,效果很差了

LSTM

img

LSTM 通过各种门,遗忘门,选择

查看全文

99%的人还看了

猜你感兴趣

版权申明

本文"11 Self-Attention相比较 RNN和LSTM的优缺点":http://eshow365.cn/6-23019-0.html 内容来自互联网,请自行判断内容的正确性。如有侵权请联系我们,立即删除!