arxiv Retrieval is Accurate Generation

名称
Retrieval is Accurate Generation
首页
https://yiyibooks.cn/arxiv/2402.17532v3/index.html
原始地址
https://arxiv.org/pdf/2402.17532
描述
标准语言模型通过从固定、有限和独立的词汇表中选择标记来生成文本。我们引入了一种新颖的方法,可以从支持文档集合中选择上下文感知短语。这种范式转变最重大的挑战之一是确定训练预言,因为可以以各种方式对文本字符串进行分段,并且可以从许多可能的文档中检索每个分段 ...