- 名称
- UPRISE: Universal Prompt Retrieval for Improving Zero-Shot Evaluation
- 描述
大型语言模型(LLM)具有令人印象深刻的能力而广受欢迎,但对特定于模型的偶数或特定于任务的提示工程的需求可能会抑制其泛化。我们提出了UPRISE(用于改进零样本评估的通用提示搜索),它调整了一个轻量级且多功能的搜索器,可以自动搜索给定零样本任务输入的提示。具体来说,我们展示了跨任务和跨模型场景中的通用性:搜索器针对不同的任务集进行了调整,但在未见过的任务类型上进行了测试;我们使用一个小型的冷冻LLM,GPT-Neo-2 ... ...