CS224n笔记13 卷积神经网络
博客专区 > hankcs 的博客 > 博客详情
CS224n笔记13 卷积神经网络
hankcs 发表于5个月前
CS224n笔记13 卷积神经网络
  • 发表于 5个月前
  • 阅读 2
  • 收藏 0
  • 点赞 0
  • 评论 0

腾讯云 技术升级10大核心产品年终让利>>>   

摘要:  知识共享署名-非商业性使用-相同方式共享:码农场 » CS224n笔记13 卷积神经网络
本文由码农场同步,最新版本请查看原文:http://www.hankcs.com/nlp/cs224n-convolutional-neural-networks.html
CS224n笔记13 卷积神经网络
补充了NLP中相对冷门的CNN,谈了谈调参与发论文的潜规则。从RNN到CNNRNN无法利用未来的特征预测当前单词,就算是bi-RNN,也不过是双向重蹈覆辙而已。经常把过多注意力放到最后一个单词上。比如,如果只想得到my birth的向量,RNN就无能为力了,因为它捕捉的是从左到右的“上文”。与此对应,softmax也是加在最后一个单词上的CNN的解决思路说来也很简单粗暴,那就计算相邻的ngram,不管它到底是不是真正的短语,眉毛胡子一把抓地为它们计算向量。什么是卷积定义在两个矩阵上的函数,生成另一个矩阵(也...

继续阅读码农场 » CS224n笔记13 卷积神经网络

原文链接http://www.hankcs.com/nlp/cs224n-convolutional-neural-networks.html


感谢阅读本文,欢迎 查看原文或访问 码农场 获取更多内容

标签: CNN CS224n
共有 人打赏支持
粉丝 28
博文 219
码字总数 53149
作品 1
评论 (0)
×
hankcs
如果觉得我的文章对您有用,请随意打赏。您的支持将鼓励我继续创作!
* 金额(元)
¥1 ¥5 ¥10 ¥20 其他金额
打赏人
留言
* 支付类型
微信扫码支付
打赏金额:
已支付成功
打赏金额: