paper: 《Attention Augmented Convolutional Networks》 https://arxiv.org/pdf/1904.09925.pdf 这篇文章是google brain的,应该有分量。上来就说:卷积神经网络有一个重要的弱点就是 它仅仅操作于于一个领域,对于 ...
分类:
Web程序 时间:
2019-04-25 11:42:18
阅读次数:
2109
在线阅读: "深度学习理论与实战:提高篇" 序言 16年9月的时候我在CSDN发了一些深度学习的文章,主要是面向没有太多经验的开发者。达文读了后觉得我的文章比较通俗易懂,邀请我写一本书,当时头脑一热就答应下来。虽然现在出版的书籍汗牛充栋,但是对我来说著书立言始终是一件非常严肃和重大的事情。立德、立功 ...
分类:
其他好文 时间:
2019-04-21 11:36:59
阅读次数:
197
爱显摆的人遇事总喜欢标新立异。Showoffs never miss an opportunity to draw attention to themselves by some outrageous novelty. 体罚是野蛮的文化的遗风遗俗。Corporal punishment was a ...
分类:
其他好文 时间:
2019-04-20 09:22:41
阅读次数:
145
多线程操作全局变量,必须考虑同步问题,否则可能出现数据不一致, 甚至触发coredump. 前段时间, 遇到一个多线程操作了全局的vector的问题, 程序崩了。场景是这样的:某全局配置参数保存在一个vector中,需要定时更新(更新线程), 另外的工作线程去读取配置。 这种场景是非常普遍的。 在该 ...
分类:
编程语言 时间:
2019-04-16 10:37:09
阅读次数:
264
这篇文章整理有关注意力机制(Attention Mechanism )的知识,主要涉及以下几点内容: 1、注意力机制是为了解决什么问题而提出来的? 2、软性注意力机制的数学原理; 3、软性注意力机制与Encoder-Decoder框架; 4、自注意力模型的原理。 一、注意力机制可以解决什么问题? 神 ...
分类:
其他好文 时间:
2019-04-16 01:12:27
阅读次数:
328
motivation: 之前使用flownet的方法有诸多弊端。 1.在检测框架中加入光流网络极大地增加了检测器模型的参数,无法用在移动端。 2.光流原本是描述两张图片间像素点的位移的,直接将其用在high-level的feature map上会引入人为的干扰。特别的,high-level的feat ...
分类:
其他好文 时间:
2019-04-14 12:33:33
阅读次数:
198
在这道题老师讲过之后,再考时,我还是WA了ヽ(*。>Д<)o゜果然,我还是好菜啊~%?…,# *'☆&℃$︿★? 谢谢Jack_Pei dalao的帮忙。~~O(∩_∩)O~~ 正文 在我这台机子上,直接由网址上到题目会出现 NOFIND404 所以这一次希望看题解的你可以自己动手丰衣足食去找到这道 ...
分类:
其他好文 时间:
2019-04-14 09:57:15
阅读次数:
104
简介 受人类视觉注意力系统的启发,文章提出了一个叫Patchwork的模型,利用了记忆和注意力之间的微妙的相互作用来进行高效的视频处理。 图1:a) 视频流中的每个时间步,我们的方法仅仅处理当前帧的一个小的局部窗,但由于一系列有状态的Patchwork cells,仍然能解释整张输入帧。 b) 状态 ...
分类:
Web程序 时间:
2019-04-10 11:46:30
阅读次数:
248
恢复内容开始 1/ 注意力机制(attention mechanism) https://lilianweng.github.io/lil-log/2018/06/24/attention-attention.html 2/Pointer network https://www.translator ...
分类:
其他好文 时间:
2019-04-05 16:50:43
阅读次数:
177
Chaque jour j'apprennais quelque chose sur la planète, sur le départ, sur le voyage. Ca venait tout doucement, au hasard des réflexions. C'est ainsi q ...