2022年10月19日
论文笔记 - An Explanation of In-context Learning as Implicit Bayesian Inference
摘要： 这位更是重量级。这篇论文对于概率论学的一塌糊涂的我简直是灾难。 由于 prompt 的分布与预训练的分布不匹配（预训练的语料是自然语言，而 prompt 是由人为挑选的几个样本拼接而成，是不自然的自然语言🤪），作者设预训练的分布为 $p$ 而 prompt 的分布设为 $p_{prompt}$，因 阅读全文
posted @ 2022-10-19 20:52 MetaZ 阅读(297) 评论(0) 推荐(0)