Transformer改进了RNN最被人诟病的训练慢的缺点，利用self-attention机制实现快速并行。 它是由编码组件、解码组件和它们之间的连接组成。 编码组件部分由一堆编码器（6个 encoder）构成。解码组件部分也是由相同数量（与编码器对应）的解码器（decoder）组成的。 所有的编 ...
分类：
其他好文 时间：
2019-03-28 15:22:11
阅读次数：
184
If we pushed our changes already to the remote repository we have to pay attention to not change the git history (using commands like rebase, reset, a ...
分类：
其他好文 时间：
2019-03-26 21:11:03
阅读次数：
218
The Evolved Transformer - Enhancing Transformer with Neural Architecture Search 2019-03-26 19:14:33 Paper："The Evolved Transformer." So, David R., Che ...
分类：
其他好文 时间：
2019-03-26 19:29:55
阅读次数：
130
搬运自我的CSDN https://blog.csdn.net/u013213111/article/details/88670270 ！！！Attention：以下操作中的单链表均带有头结点！！！参考怎样实现链表的归并排序由于待处理的单链表带有头结点，因此把程序分为MergeSort和MergeS ...
分类：
编程语言 时间：
2019-03-24 09:51:29
阅读次数：
177
搬运自我的CSDN https://blog.csdn.net/u013213111/article/details/88670136 ！！！Attention：以下操作中的单链表均带有头结点！！！参考了这三篇文章：单链表快速排序算法的实现单链表的快速排序单链表的快排实现快速排序的思路是：首先，选取 ...
分类：
编程语言 时间：
2019-03-24 09:28:37
阅读次数：
176
Title: The Attention Merchants (书评类文章) 《注意力商人》 attention 注意力 merchant 商人(零售商，强调通过贩卖物品获取利益) businessman 商人(从事商业活动的人，而且通常指在公司中地位比较高的主管) The history of t ...
分类：
其他好文 时间：
2019-03-18 13:52:43
阅读次数：
198
Transformer Transformer是Google的论文《Attention is All You Need》种提出的结构。读完论文之后对于Transformer的细节还是搞不清楚，查阅了很多解读文章，并结合代码终于算是弄得算比较清楚了。我现在尝试结合图片的方式对Transformer的工 ...
分类：
其他好文 时间：
2019-02-27 21:49:50
阅读次数：
862
1. 需要传入词向量 2.position_encoding 3. multihead_attention 4. feedforward 5.normalize 6. encoder-decoder 7. train ...
分类：
其他好文 时间：
2019-02-25 15:00:56
阅读次数：
332
题目链接 https://vjudge.net/problem/CodeForces 1061B 题面 Description You came to the exhibition and one exhibit has drawn your attention. It consists of nn ...
分类：
其他好文 时间：
2019-02-15 13:30:33
阅读次数：
188
Turning:Are you pay attention?Good.If you are not listening carefully you will miss things,important things.I will not repeat myself and you will not ...
分类：
其他好文 时间：
2019-02-13 22:28:15
阅读次数：
192
