LangChain原理学习笔记

最新推荐文章于 2024-09-23 14:49:29 发布
最新推荐文章于 2024-09-23 14:49:29 发布
阅读量862 收藏 17
点赞数 22
文章标签： langchain 学习 dubbo chatgpt 人工智能 大模型 LLM
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Y525698136/article/details/139503654
版权

最新越发觉得AI的发展，对未来是一场革命，LangChain已经在工程设计上有了最佳实践，类似于AI时代的编程模型或编程框架，有点Spring框架的意思。之前在LangChain上也有些最佳实践，所以在这里分享记录下。

1.LangChain解决什么问题

LangChain是基于LLM之上的，在应用层和底层LLM之前的一个很好的编程框架，如果把LLM比喻为各种类型的数据库、中间件等这些基础设施，应用层是各种业务逻辑的组合之外，那么LangChain就负责桥接与业务层和底层LLM模型，让开发者可以快速地实现对接各种底层模型和快速实现业务逻辑的软件开发框架。

那么LangChain是如何做到的呢？试想一下，现在底层有一个大模型的推理能力，除了在对话框手动输入跟他聊天之外。如何用计算机方式跟它互动呢？如果把一次LLM调用当作一个原子能力，如何编排这些原子能力来解决一些业务需求呢？Langchain就是来解决这个事情的。

2.LangChain的几个核心概念

Model I/O

这里重点把背后的LLM模型做了一层封装，开发者可以通过更改配置的方式快速切换底层LLM模型，比如chatgpt，chatGLM、通义千问等模型。

同时还有些高阶功能：比如提供了缓存等功能，这样对于语义上类似的query，如果缓存有，那么langchain可以快速返回结果，而不需要调用大模型。

Retriver

检索是为了解决大模型打通用户的本身数据，做一些面向业务属性的东西。这里的检索并非传统的关系型数据库，更多的是与大模型的本身逻辑相似的，比如向量数据库。
一个经典的结合LLM和外部用户的文档进行智能答疑的场景

文档->分词->embedding->向量数据库query->向量数据库查询->TOP N->上下文+ 用户提问 + prompt -> LLM -> 返回结果
一个经典的图如下：image

关键技术：文档如何拆分、embedding过程、 TOPN 向量距离的选择

embedding技术选型

embedding是将现实中的物体通过向量化的方法转化为高维向量，可被机器学习模型所识别。他是一种映射，同时也保证了能清晰地表达现实物体的特征。基于此，可以进行一些归类分析、回归分析等。

现在市面上常见的embedding方法有通义千问的embedding等方法。

向量数据库：

向量数据库底层存储的是一堆向量，它提供了根据向量相似度进行查询的能力，一般情况下，向量相似度代表了现实世界中物体的相似度。比如”我的名字是小明“ 和“我叫小明”这两句话所代表的含义几乎是相同的，那么在embedding之后，基于向量数据库进行查询的时候，它们俩的相似度就会很近。

Chain

各种类型的chain，chain代表了各种业务类型的组合，类似于工作流的编排。

Memory

LLM本身提供了记忆的能力，同时提供了接口，开发者可以将历史的对话记录传入给LLM。LangChain需要使用外部存储保存这些历史的会话和记忆。可以使用数据库、缓存等进行保存。

Agent

重点是代理工具

代理工具可以让应用程序基于大模型的推理能力，然后进行代理工具或代理服务的调用。因为LLM是没有“联网”的能力的，如果想解决特定的应用场景，代理工具是个完美的选择。

代理工具通常包含三个方面：用户输入、prompt编排LLM思考与路由代理的过程、背后的代理服务。其中难点可能就在于prompt设计了。通常的“套路”是这样的：

ReAct 模型

输入：用户的问题

思考过程：如果是情况1（这个是需要LLM进行意图识别进行思考的），那么推理和提取出一些关键参数，调用agent1，如果是情况2，那么推理和提取出一些关键参数，调用agent2

Act：调用agent1对应一个JSON格式化的输入，调用function1，返回结果。

观察：观察调用后的结果，再结合推理的能力，再进行循环思考。

3.LangChain的在实际场景中的实践

集团内部开发了一个JAVA版本的LangChain框架，以下实践基于此框架与开源大模型chatGLM-6B进行。

淘宝开放平台智能问答

淘宝开放平台对内托管了上万个API，每天在内部群里都会有开发者咨询API发布问题，之前我们是通过NLP来实现智能问答的，现将它升级为基于大模型的智能问答，以下是具体的技术实现过程。

  • 知识库Embedding过程

由于之前已经沉淀好了很多知识库，都是Question-Answer的这种形式，这里我们对Question，也就是问题进行Embedding，此处采用通义千问提供的Embedding方法。

知识库embedding：

TongYiEmbeddings embeddings = new TongYiEmbeddings();
embeddings.setServerAccessId(ALINLP_EMBEDDINGS_ACCESSID);
embeddings.setServerUrl(ALINLP_EMBEDDINGS_SERVER_URL);
embeddings.setServerUuid(ALINLP_EMBEDDINGS_UUID);
Document document = new Document();
document.setPageContent(rawText);
List<Document> documents = embeddings.embedDocument(Arrays.asList(document));
Document  vecDocument= documents.get(0);
// 向量化知识
String embeddingString = JSON.toJSONString(vecDocument.getEmbedding()).replaceAll("\[", "{")
.replaceAll("\]", "}");

return embeddingString;
  • 向量数据库存储和查询

此处采用hologres向量数据库，图中红框表示知识库问题与回答在数据库中具体的向量化存储数据。image

向量距离数据库查询

select origin_content as originContent,
        origin_title as originTitle,
        pm_approx_squared_euclidean_distance(embedding_title, #{embeddingTitle}) as distance
from vs_knowledge
order by distance asc
limit #{limit}
  • 大模型问答链路

问答chain的基本实现：

//1. 初始化ChatGLM的参数
ChatGLMV2Internal chatGLMV2Internal = new ChatGLMV2Internal();
chatGLMV2Internal.setTemperature(0.01d);
chatGLMV2Internal.setMaxLength(2048);


//2. 提示词编写
PromptTemplate prompt = new PromptTemplate();
String template = "已知信息：\n" +
"{context} \n" +
"\n" +
"根据上述已知信息，简洁和专业的来回答用户的问题。如果无法从中得到答案，请说 “根据已知信息无法回答该问题” 或 “没有提供足够的相关信息”，不允许在答案中添加编造成分，答案请使用中文。问题是：{question}";
prompt.setTemplate(template);

//3. 向量数据库检索配置，比如最大向量距离
RetrievalQA qa = new RetrievalQA();
qa.setRecommend(5);
qa.setMaxDistanceValue(10000.0d);
qa.setLlm(chatGLMV2Internal);
qa.setPrompt(prompt);
qa.setRetriever(holoRetriver.asRetriever());
qa.init();

//4. LLM大模型问答
Map<String, Object> inputs = new HashMap<>();
inputs.put("question", question);
inputs.put("input", question);
Map<String, Object> outputs = qa.run(inputs);

llmKonwledgeDO.setContent(String.valueOf(outputs.get("text")));
// 补充 doclist
return llmKonwledgeDO;
AI Agent实践

以下实现了一个网关API调用日志解析的agent。

Agent工具注册：

this.setName("ApiLogTool");
this.setDescription("这是一个调用日志查询接口，如果[{question}]中包含requestId关键字,你可以请求这个工具与日志系统进行交互，调用这个工具。\n" +
                    "请先提取出requestId的值，将它赋值为value。调用参数：[{"requestId": "value", "type": "String", "description": "调用请求id"}]。");

工具解析：

Map<String,Object> parse = (Map<String,Object>)JSON.parse(toolInput);
if(parse.get("requestId")==null){
    return new ToolExecuteResult("");
}
String requestId = parse.get("requestId").toString();
ApiLogSearchQuery apiLogSearchQuery = new ApiLogSearchQuery();
//日志查询解析处理

思考决策逻辑：


public static final String FORMAT_INSTRUCTIONS_CH =
"用户提出了一个问题: {question} \n" +
"你可以选择使用下面这些工具：\n"+
"{tool_list_description}"+
"\n"+
"同时你的思考过程如下："+
"Thought: 每一次你需要首先思考你应该做什么\n" +
"Action: 你需要决定是否使用工具，应该是[{tool_names}] 中的一个Action，格式为JSON。如果匹配不到工具，就不要思考了，直接返回结果，请不要把思考过程返回给用户。\n" +
"Input: 如果匹配到工具，使用的工具的输入参数，赋值给params\n" +
"Observation: 如果匹配到工具，工具的输出结果 格式为[]。\n" +
"Answer: 每一步回答问题的答案，格式为JSON。你可以多次使用Thought/Action/Input/Observation/Answer来一步一步的思考如何回答问题。\n";

4.个人小思考

  1. 未来微服务HSF这种形式会向上往 agent工厂或者agent服务框架这种形式演进，因为这个框架搭好了后，后面各个业务方快速集成到agent服务上，可被上层AI应用层调用
  2. 如果多个agent联动了，才是真正的智能
  3. 如何定义agent？

Agent体系架构可以分为慎思型、反应型和混合型。慎思型构建负责规划和推理行为，反应型构建处理需要快速响应的重要事件。信念-期望-意图（Belief-Desire-ltension， BDI) 体系架构是混合型体系架构的一个重要类型。 Agent的表示形式，Agent的行为可以被描述成好像拥有信念、期望和意图等思维状态。信念表示Agent拥有的知识，期望描述Agent追求的目标，意图说明Agent选择计划以实现哪些目标。

如何系统的去学习大模型LLM ？

作为一名热心肠的互联网老兵，我意识到有很多经验和知识值得分享给大家，也可以通过我们的能力和经验解答大家在人工智能学习中的很多困惑，所以在工作繁忙的情况下还是坚持各种整理和分享。

但苦于知识传播途径有限，很多互联网行业朋友无法获得正确的资料得到学习提升，故此将并将重要的 AI大模型资料 包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。

所有资料 ⚡️ ，朋友们如果有需要全套 《LLM大模型入门+进阶学习资源包》，扫码获取~

👉CSDN大礼包🎁：全网最全《LLM大模型入门+进阶学习资源包》免费分享（安全链接，放心点击）👈

​

一、全套AGI大模型学习路线

AI大模型时代的学习之旅：从基础到前沿，掌握人工智能的核心技能！

img

二、640套AI大模型报告合集

这套包含640份报告的合集，涵盖了AI大模型的理论研究、技术实现、行业应用等多个方面。无论您是科研人员、工程师，还是对AI大模型感兴趣的爱好者，这套报告合集都将为您提供宝贵的信息和启示。

img

三、AI大模型经典PDF籍

随着人工智能技术的飞速发展，AI大模型已经成为了当今科技领域的一大热点。这些大型预训练模型，如GPT-3、BERT、XLNet等，以其强大的语言理解和生成能力，正在改变我们对人工智能的认识。 那以下这些PDF籍就是非常不错的学习资源。

img

在这里插入图片描述

四、AI大模型商业化落地方案

img

阶段1：AI大模型时代的基础理解

  • 目标：了解AI大模型的基本概念、发展历程和核心原理。
  • 内容：
    • L1.1 人工智能简述与大模型起源
    • L1.2 大模型与通用人工智能
    • L1.3 GPT模型的发展历程
    • L1.4 模型工程
      - L1.4.1 知识大模型
      - L1.4.2 生产大模型
      - L1.4.3 模型工程方法论
      - L1.4.4 模型工程实践
    • L1.5 GPT应用案例

阶段2：AI大模型API应用开发工程

  • 目标：掌握AI大模型API的使用和开发，以及相关的编程技能。
  • 内容：
    • L2.1 API接口
      - L2.1.1 OpenAI API接口
      - L2.1.2 Python接口接入
      - L2.1.3 BOT工具类框架
      - L2.1.4 代码示例
    • L2.2 Prompt框架
      - L2.2.1 什么是Prompt
      - L2.2.2 Prompt框架应用现状
      - L2.2.3 基于GPTAS的Prompt框架
      - L2.2.4 Prompt框架与Thought
      - L2.2.5 Prompt框架与提示词
    • L2.3 流水线工程
      - L2.3.1 流水线工程的概念
      - L2.3.2 流水线工程的优点
      - L2.3.3 流水线工程的应用
    • L2.4 总结与展望

阶段3：AI大模型应用架构实践

  • 目标：深入理解AI大模型的应用架构，并能够进行私有化部署。
  • 内容：
    • L3.1 Agent模型框架
      - L3.1.1 Agent模型框架的设计理念
      - L3.1.2 Agent模型框架的核心组件
      - L3.1.3 Agent模型框架的实现细节
    • L3.2 MetaGPT
      - L3.2.1 MetaGPT的基本概念
      - L3.2.2 MetaGPT的工作原理
      - L3.2.3 MetaGPT的应用场景
    • L3.3 ChatGLM
      - L3.3.1 ChatGLM的特点
      - L3.3.2 ChatGLM的开发环境
      - L3.3.3 ChatGLM的使用示例
    • L3.4 LLAMA
      - L3.4.1 LLAMA的特点
      - L3.4.2 LLAMA的开发环境
      - L3.4.3 LLAMA的使用示例
    • L3.5 其他大模型介绍

阶段4：AI大模型私有化部署

  • 目标：掌握多种AI大模型的私有化部署，包括多模态和特定领域模型。
  • 内容：
    • L4.1 模型私有化部署概述
    • L4.2 模型私有化部署的关键技术
    • L4.3 模型私有化部署的实施步骤
    • L4.4 模型私有化部署的应用场景

学习计划：

  • 阶段1：1-2个月，建立AI大模型的基础知识体系。
  • 阶段2：2-3个月，专注于API应用开发能力的提升。
  • 阶段3：3-4个月，深入实践AI大模型的应用架构和私有化部署。
  • 阶段4：4-5个月，专注于高级模型的应用和部署。
这份完整版的所有 ⚡️ 大模型 LLM 学习资料已经上传CSDN，朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】

全套 《LLM大模型入门+进阶学习资源包》↓↓↓ 获取~

👉CSDN大礼包🎁：全网最全《LLM大模型入门+进阶学习资源包》免费分享（安全链接，放心点击）👈

​

程序学到昏
关注
【AI大模型应用开发】【RAG评估】2. 实战：LangChain x RAGAs x LangSmith联合评估RAG应用，兼看如何借助LangSmith有效学习LangChain
同学小张的博客
02-26 2215
今天我们完整的实战：将RAGAs集成在LangChain的RAG应用中，同时打通LangSmith平台，使评估过程可视化。同时还会有意外收获：带你看看如何利用LangSmith平台来有效学习LangChain的使用和相关知识。
【AI大模型应用开发】【LangChain系列】8. 重要组件介绍：如何运用LangChain表达式语言LCEL中的RunnableParallel和RunnablePassthrough？
同学小张的博客
03-13 1780
经过几次的LangChain实战，发现其中最常用的两个封装类：`RunnableParallel` 和 `RunnablePassthrough`。这是LangChain独有的表达式语言(LCEL)中最主要的组件。本文我们来深入学习下这两个组件的原理与使用。
[AI]算法小抄-你不知道的LangChain原理
weixin_44491772的博客
05-29 3076
如果在LangChain原始工程中搜索promt.py，你会发现有非常多的相关文件。这是因为对于LangChain底层不同的功能，都是需要依赖不同的prmpt进行控制，虽然简单粗暴好理解，但是也不是没有副作用的，以下总结这种框架共有优缺点，这个优缺点同样适用于ChatGPT Plugin和LlmaIndex...等，Prompt Egineering框架。
LangChain笔记
smartcat2010的博客
05-22 650
很好的LLM知识博客：https://lilianweng.github.io/posts/2023-06-23-agent/
Spring Boot集成LangChain来实现Rag应用
最新发布
2401_87462361的博客
09-23 909
检索增强生成（RAG）是指对大型语言模型输出进行优化，使其能够在生成响应之前引用训练数据来源之外的权威知识库。大型语言模型（LLM）用海量数据进行训练，使用数十亿个参数为回答问题、翻译语言和完成句子等任务生成原始输出。在 LLM 本就强大的功能基础上，RAG 将其扩展为能访问特定领域或组织的内部知识库，所有这些都无需重新训练模型。这是一种经济高效地改进 LLM 输出的方法，让它在各种情境下都能保持相关性、准确性和实用性。LangChain 是一个用于开发由语言模型驱动的应用程序的框架。
Langchain学习笔记（含知识库简单构建与灵活的文件对话）
hh2311691121的博客
07-13 920
简单学习LangChain框架，并且构建一个自己的知识库问答系统
AI大模型全栈工程师课程笔记 - LangChain
Michael是个半路程序员
12-20 1420
langchain大模型SDK
大白话讲清楚：什么是 Langchain 及其核心概念
铭毅天下Elasticsearch
01-13 2053
在AI和机器学习领域，每天都有新技术和框架涌现。今天，我们来聊聊最近引起广泛关注的一个框架 —— Langchain。https://python.langchain.com/docs/get_started/introduction那么，Langchain到底是什么，它为什么这么受欢迎，以及它是如何工作的呢？别担心，我会用大白话帮你一步步弄明白！1、Langchain 简介想象一下，如果你能让聊...
大模型入门学习笔记.zip
09-16
大模型入门学习笔记.zip 大模型入门学习（主要基于DataWhale组织的学习任务） ## Task 01 梳理了语言模型的进化史。 ## Task 02 这一节主要是讲述大模型的能力，通过一些任务来探索，这里我整理了prompt的范式，...
AI大模型学习笔记：LangChain源码解读与中文模型实践
资源摘要信息:"《AI大模型应用》--langchain学习笔记包含了源码解读、使用中文模型、实例等内容的详细说明和应用。这个资源是由一位在AI大模型应用领域有深厚积累的专家制作的，目的是希望帮助更多的人理解和应用AI...
大模型应用开发框架 LangChain 学习笔记（二）
Mr_WYJ的博客
09-22 923
LLMChain。
LangChain原理深度解析：构建高效语言模型应用的关键框架
weixin_41544125的博客
03-10 1036
LangChain作为一个专注于LLM应用开发的框架，通过其模块化、可扩展性和灵活性的设计思路，简化了LLM应用的开发过程，提高了开发效率。然而，LLM应用的开发过程复杂且繁琐，需要处理大量的数据和复杂的逻辑。本文将详细介绍LangChain的基本原理，包括其设计思路、核心组件、工作流程以及在语言模型应用开发中的应用。LangChain是一个专注于LLM应用开发的框架，它提供了一套通用的接口和组件，将LLM相关的功能进行模块化处理，使得开发者可以更加便捷地构建复杂的LLM应用。LangChain；
模型工具LangChain：原理详解与实战案例分析
2401_85325726的博客
08-28 696
LangChain是一个用于开发由语言模型驱动的应用程序的框架。它使得可以构建以下类型的应用程序：数据感知：将语言模型与其他数据源连接起来智能：允许语言模型与其环境进行交互LangChain的主要价值在于：组件：提供了处理语言模型的抽象，以及每个抽象的多个实现。组件是模块化且易于使用的，无论您是否使用LangChain的其他部分。现成的链：结构化组件的组合，用于完成特定的高层任务。
大模型面试准备（二）：一文搞懂 LangChain
2401_84033492的博客
04-04 2009
萃取（Extraction）：LLM 的另一个令人兴奋的应用是从原始的 LLM 生成中获得结构化的输出。
【大模型】—LangChain开源框架介绍
crystal_csdn8的博客
07-16 5363
了解Langchain的概念，业务框架，核心元素以及可能的应用场景等
Langchain架构原理浅谈
YELLOWAUG的博客
02-21 1338
所以Embedding model模型的选择很重要，用户输入查询或者问题信息，通过嵌入器转换成向量，把查询信息的向量与知识库的向量做比较，并通过提示词的形式输入LLM模型，最终通过LLM模型得到大胆。在使用Langchain的过程中发现，Langchain的原理图使用的是英文图片，流程的描述用词过于专业，所以这里我就用自己的理解来简单的表述Langchain的工作过程，希望对大家在使用Langchain开发应用的过程中有所帮助。在处理文本时，每个单词或短语都被转换为一个固定大小的向量。
用通俗易懂的方式讲解：涨知识了，这篇大模型 LangChain 框架与使用示例太棒了
机器学习社区
01-13 1618
LangChain 中的 Data Connection 将 LLM 与万物互联，给 LangChain 构建的应用带来了无限可能，而 Agent 又为应用开发中非常常见的”事件驱动“这一开发框架提供了偷懒的途径，将分支决策的工作交给 LLM，这又进一步简化了应用开发的工作；结合基于高度抽象的 Model I/O 及 Memory 等组件，LangChain 让开发者能够更快，更好更灵活地实现 LLM 助手、对话机器人等应用，极大地降低了 LLM 的使用门槛。第三方 LLM。
大模型工具：LangChain 原理与实战案例
2301_78285120的博客
12-25 355
无论是简单的应用还是复杂的应用，LangChain都提供了相应的组件和示例，帮助开发人员快速构建应用。Data connection是许多LLM应用程序所需的一部分，它涉及用户特定的数据，这些数据不是模型的训练集的一部分。在简单的应用程序中，单独使用LLM是可以的，但更复杂的应用程序需要将LLM进行链接，无论是与其他LLM还是其他组件进行链接。使用这些模块，可以有效地管理和处理与语言模型的交互。使用这些构建模块，可以有效地加载、转换、存储和查询用户特定的数据，为LLM应用程序提供必要的数据连接。
计算机组成原理学习笔记】
08-31
《计算机组成原理学习笔记》是一本介绍计算机组成原理的学习材料。计算机组成原理是指计算机体系结构所体现的属性，即具体指令的实现。冯诺依曼结构是计算机基本组成的一种结构。计算机系统结构定义了系统软硬件的交...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值