我的随笔

稀疏注意力 | Big Bird: Transformers for Longer Sequences

山竹小果 2020-08-06 15:37 阅读:1454 评论:0 推荐:0

label 选择： soft label or hard label？

山竹小果 2020-07-31 12:14 阅读:7300 评论:0 推荐:0

预训练模型 | MASS：更适合seq2seq类任务

山竹小果 2020-06-28 16:44 阅读:1240 评论:0 推荐:0

文本相似度计算/文本比较算法

山竹小果 2020-06-08 21:12 阅读:3551 评论:0 推荐:2

论文阅读 | Is BERT Really Robust? A Strong Baseline for Natural Language Attack on Text Classification and Entailment

山竹小果 2020-06-03 14:36 阅读:1595 评论:0 推荐:0

论文阅读 | Lite Transformer with Long-Short Range Attention

山竹小果 2020-05-28 12:51 阅读:1970 评论:0 推荐:0

预训练模型 | ELECTRA: Efficiently Learning an Encoder that Classifies Token Replacements Accurately

山竹小果 2020-05-25 21:23 阅读:799 评论:0 推荐:0

Transformer 及其家族( Transformer-XL, Reformer... )

山竹小果 2020-05-25 20:23 阅读:664 评论:0 推荐:1

持续更新

山竹小果 2020-05-25 20:09 阅读:868 评论:0 推荐:1

PaddlePaddle Transformer encoder 源码解析

山竹小果 2020-05-25 10:13 阅读:1508 评论:0 推荐:0