2023年7月27日
Lecture 4 -- LSTM
摘要： 课件：Recurrent Neural Network (RNN) (ntu.edu.tw) 1. RNN 上图表示的RNN是三个模型吗？ 不是！是一个模型被重复使用了三次！ RNN分为两种：Elman Network和Jordan Network Elman Network：Memory Cell 阅读全文
posted @ 2023-07-27 23:09 Peg_Wu 阅读(40) 评论(0) 推荐(0)
Lecture 4 -- Self-Attention
摘要： 1. 一堆Vector作为Input 当模型以一堆的向量作为输入时，输出可以是与输入长度相同的一堆向量(focus of this lecture)，可以是与输入长度不相同的一堆向量(seq2seq)，也可以是一个向量! 2. 为什么要用Self-Attention？ 以一个词性标注的任务为例，假如 阅读全文
posted @ 2023-07-27 15:58 Peg_Wu 阅读(82) 评论(0) 推荐(0)