第三节笔记

RAG

LLM存在一些问题,如知识的时效性,专业性以及定制化成本很高。
在这里插入图片描述
对此存在两种解决方案:在这里插入图片描述
对于前者相当于建立一个额外的知识库,在使用时将我们的额外知识库和用户的提问一起输入给大模型,好处是成本低,不用额外的训练,并且知识库可以进行实时更新,但是问题是受模型能力受限,而后者可以提升模型的能力,但是成本要高。并且无法实时更新。
在这里插入图片描述
从上面这个图也可以看出RAG的工作流程,首先使用词向量模型sentence transformer将用户输入进行文本向量化,之后与向量数据库进行匹配得到相似的文本段,之后和用户输入一起输入到大模型中。

LangChain

这个库的作用就是
在这里插入图片描述
在上图中我们首先要对不同类型的文档进行字符串提取,之后因为大模型的上下文是有限制的,所以要对要对这些提取到的字符串进行分块,再之后就是将其进行向量化,就和上面的差不多了。

构建检索向量问答链

检索向量问答链是这个库的核心使用,使用这个功能我们可以很快的进行应用的开发。在这里插入图片描述

  • 10
    点赞
  • 9
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值