arxiv The Flan Collection: Designing Data and Methods for Effective Instruction Tuning

名称
The Flan Collection: Designing Data and Methods for Effective Instruction Tuning
首页
https://yiyibooks.cn/arxiv/2301.13688v2/index.html
原始地址
https://arxiv.org/pdf/2301.13688.pdf
描述
我们研究了公开可用的指令调整方法的设计决策,并分解了 Flan 2022 的开发(Chung 等人,2022)。通过对 Flan 任务和方法集合进行仔细的消融研究,我们梳理了设计决策的效果,这些设计决策使 Flan-T5 在评估设置中比之前的工作高出 3-17% 以上 ...