随笔分类 -  NLG

摘要:Motivation 微调实际上是利用大型预训练过的语言模型来执行下游任务的一种方法。但是,它会修改所有的语言模型参数,因此需要为每个任务存储一个完整的副本。 因此,要构建和部署依赖于大型预训练的LM的NLP系统,目前需要为每个任务存储一个修改后的LM参数副本。考虑到目前的lms的大规模,这可能会非 阅读全文
posted @ 2022-04-06 10:52 TABball 阅读(493) 评论(0) 推荐(0)
摘要:Motivation 控制文本生成的风格是一个比较困难的文本生成问题,在不修改模型结构的基础上去控制更加困难。 Introduction 本文提出了一个将语言模型和一个额外的属性分类器结合在一起的方法,可以方便控制文本生成的风格和主题(topic)。 Method 在计算机视觉领域,有研究控制图像风 阅读全文
posted @ 2022-03-29 11:29 TABball 阅读(147) 评论(0) 推荐(0)
摘要:原文链接 介绍 从结构化数据中自动生成文本描述提高了知识库对普通用户的可访问性。这些应用包括向非专家解释数据记录,撰写体育新闻,总结多个文档中的信息,并生成对话回应。 数据到文本这个领域依然有很多挑战:首先,它们采用扁平的数据本体结构,例如数据记录的槽值对或者表格的扁平形式。这种扁平化的结构不足以在 阅读全文
posted @ 2021-11-06 13:52 TABball 阅读(191) 评论(0) 推荐(0)