谷歌提出一种称为“Step-Back Prompting”的Prompt技术
来源于谷歌Deepmind在10月9日提交的一篇论文。
论文下载地址:https://arxiv.org/pdf/2310.06117.pdf
谷歌提出一种称为“Step-Back Prompting”的Prompt技术,让LLMs自己抽象问题,得到更高纬度概念和原理,再用这些知识推理并解决问题。
他们用PaLM-2L模型做了实验,发现这种Prompt技巧能显著提升密集推理任务(STEM、知识问答、多跳问题)的性能质量表现。
MMLU 物理和化学方面表现提高了7%,TimeQA 提高27%,MuSiQue 提高了7%。
MMLU:大规模多任务语言理解测试数据集
TimeOA:时间敏感问题测试数...