凤凰于飞

摘要： 关于Bert的 [cls] 的输出 在抱抱脸团队发布的Pytorch版的Bert中，要想取到每句话的第一个cls特征是一件容易的事情。直接使用Bert的输出，然后.pooler_output 就可以了。 BERT的最后一层的输出是一个[batch, seq_length,dim]的东西，dim通常为 阅读全文