alex_bn_lee

摘要： 参考：Neural machine translation with a Transformer and KerasNeural machine translation with a Transformer and Keras 下面的示意图可以更加清楚的了解Encoder与Decoder之间的信息传 阅读全文

摘要： 参考：动手学深度学习第十八课：seq2seq（编码器和解码器）和注意力机制 以机器翻译作为示例讲解的，相关笔记如下： Encoder与Decoder之间的关联，可以是最后的隐含层，或者不同的Attention层，而且对于Decoder的没一个模块都对应着不同的输入，与U-Net模型类似，如下图所示。 阅读全文

摘要： 参考：Transformer - Attention 参考：The Transformer Family 参考：利用 Transformer 网络建立预测模型 Full Architecture 分解（Feed Forward即是Fully Connected） Encoder部分 Decoder部 阅读全文