在不训练模型的情况下强化语言模型

温柔哥`

于 2024-08-23 15:43:25 发布

阅读量116

点赞数 2

分类专栏：大模型文章标签：语言模型设计Prompt LLMs

版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文链接：https://blog.csdn.net/lemonzjk/article/details/141300488

版权

大模型专栏收录该内容

3 篇文章 0 订阅

订阅专栏

文章目录

一些神奇咒语
提供额外资讯
拆解任务
使用工具
让模型彼此合作

在这里插入图片描述

一些神奇咒语

让模型一步一步的思考

在这里插入图片描述

让模型解释一下自己的答案

在这里插入图片描述

对模型进行情绪勒索，比如对模型说：这件事对我真的很重要！

在这里插入图片描述

跟模型说”请“是没有用的；跟模型说“要做什么”，不要跟模型说“不要做什么”；可以跟模型说会给他一些小费；可以跟模型说你会受到惩罚；可以跟模型说不要刻板；

在这里插入图片描述

直接让AI来想Prompt，比如我想解答一道数学题，直接问AI：如果我今天要解决一道数学问题，你有什么样的咒语可以强化你的能力呢？能不能给我一个更强的咒语？

在这里插入图片描述

提供额外资讯

可以举例子、可以让他先读一些资料（in-context learning）

拆解任务

让他自己把写过的内容进行摘要，以免他忘记了

在这里插入图片描述

回顾一下CoT，其实就是让模型去思考，那么为什么让他思考就会有用呢？

CoT可以看作是一种拆解任务，不过现在的模型本身就已经会CoT了

在这里插入图片描述

让模型检查自己的错误

在这里插入图片描述

让模型自己多次检查自己的答案（ToT - Tree of Thoughts）

在这里插入图片描述

总结来说，拆解任务有下面3种

在这里插入图片描述

* of thought 就是把一个复杂的任务拆解成小的任务

在这里插入图片描述

使用工具

搜索引擎，就是先去网络上搜寻出相关资料，然后和问题一起给模型，注意这时模型参数并不会改变。现在的gpt-4已经可以使用搜索引擎了，只不过什么时候需要搜是他自己决定的，你可以直接跟他说去上网搜寻。

在这里插入图片描述

写程序，过去是单纯靠文字接龙，但是现在在列出式子后，会写程序，这样解数学问题基本就不会错了。

在这里插入图片描述

语言模型是怎么使用工具的？ 其实还是文字接龙，就是在接不出来的时候就调用适当的工具得到想要的内容后，继续接龙。

在这里插入图片描述

这篇论文介绍了如何综合利用前面的能力

在这里插入图片描述

让模型彼此合作

杀鸡焉用牛刀，简单的任务可以给简单的模型处理，复杂的任务给厉害的模型处理。

在这里插入图片描述

让模型彼此讨论，彼此讨论的时候可能需要这样的一句话：”你不需要完全同意我的看法“，不然它们可能就会讨论不起来，因为现在的模型都是比较谦逊的。

在这里插入图片描述

给模型不同的角色

在这里插入图片描述

关注

2
点赞
踩
2

收藏

觉得还不错? 一键收藏
0
评论
在不训练模型的情况下强化语言模型

在不训练模型的情况下，如何增强语言模型的能力
复制链接

扫一扫

专栏目录

评论

被折叠的条评论为什么被折叠?

到【灌水乐园】发言

查看更多评论

添加红包

成就一亿技术人!

hope_wisdom

发出的红包

实付元

使用余额支付

点击重新获取

扫码支付

钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。