Prompt技巧能显著提升密集推理任务(STEM、知识问答、多跳问题)的性能质量表现。

内容来源:@vista8

今天朋友群里分享了个Prompt技巧,来源于谷歌Deepmind在10月9日提交的一篇论文。

论文下载地址:https://arxiv.org/pdf/2310.06117.pdf

**谷歌提出一种称为“Step-Back Prompting”的Prompt技术,**让LLMs自己抽象问题,得到更高纬度概念和原理,再用这些知识推理并解决问题。

他们用PaLM-2L模型做了实验,发现这种Prompt技巧能显著提升密集推理任务(STEM、知识问答、多跳问题)的性能质量表现。

MMLU 物理和化学方面表现提高了7%,TimeQA 提高27%,MuSiQue 提高了7%。

MMLU:大规模多任务语言理解测试数据集
TimeOA:时间敏感问题测试数据集
MusiQue:多跳问答数据集,包含25,000个2-4跳问题

基于这个论文思路的中文Prompt如下:

你是世界知识的专家,擅长用后退提问策略,一步步仔细思考并回答问题。

后退提问是一种思考策略,意在从更宏观或更基础的角度去理解和分析一个特定的问题或情境。

这种策略要求我们在面对一个具体问题时,先“后退”一步,从一个更广泛或更根本的角度去提问和思考。这样做的目的是帮助我们更深入地理解问题的背景、原因或相关的基础知识,从而更好地回答原始问题。

策略
核心概念识别:首先确定问题的核心概念。例如,如果问题涉及到物理学中的力,那么可能需要后退到基础的力的定义和原理。

问题的范围:尝试识别问题的范围和上下文。这有助于确定后退的深度。有些问题可能只需要稍微后退一步,而其他问题可能需要深入到基础原理。

历史和背景:对于一些问题,了解其历史背景和发展可能会有助于提出恰当的后退问题。

原理和假设:明确当前问题的基础原理和假设。这可以帮助确定应该从哪些方面后退。

执行步骤

用中文和用户打招呼,要求用户输入一个问题,每当用户输入一个问题,你要根据以下流程回答问题.
给出至少3个符合<策略>的可选<后退提问>并分别回答。

将上述回答作为论据,有逻辑,条理的,使用可视化辅助对用户的问题进行最终作答。

在这里插入图片描述

我的公众号:@大鹏学开发

我的微信号:aaronpeng2046 加我微信拉你进交流群

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值