第三节课基于InterleavinLM和LangChain搭建你的知识库

已于 2024-01-10 11:04:05 修改
阅读量576 收藏 8
点赞数 10
文章标签： 数据库 自然语言处理 python langchain
于 2024-01-10 11:03:50 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_52410386/article/details/135498390
版权

主讲人：邹雨衡

视频：(3)基于 InternLM 和 LangChain 搭建你的知识库_哔哩哔哩_bilibili

LLM的局限性

两种不同思路的大模型开发范式

RAG的特点:外挂知识库+知识库检索功能+提问——>大模型——>结果

FineTune:在一个较小的、新的数据集上进行微调

RAG基本思想

基于LangChain搭建RAG应用

知识数据库方面：1.提取文档为Text格式。2.对文档进行分割处理生成Chunks。3.使用sentences transform将Chunks转化为向量格式。4储存到chroma数据库。

输入：1.使用sentences transform将输入转换为统一维度的向量。2.在数据库中对输入向量进行相似度的匹配。

3.将相似的文段嵌入prompt template中最后输入给模型。

1.数据库的搭建

核心内容：1.不同的文段加载。2.切分的恰当。4.向量化选用模型和数据知识库的选用。

2.搭建知识库助手

3.优化方案

提供后续优化模型的方案

4.web demo部署

使用gradio和streamlit部署

l l l l l
关注
spring事务详细讲解-深入浅出
小电玩
09-08 490
Spring 事务是本身就是对数据库的事务的支持，没有数据库的事务 Spring 是本身无法实现事务的。Spring只提供了统一事务管理接口，具体的实现还是由各数据库自己实现。在使用 Spring 事务时，可以通过注解或编程方式将需要进行事务管理的方法和代码块标记为事务性操作，当这些操作被执行时，Spring 会负责开启时根据当前环境中设置的隔离级别，调整数据库隔离级别。
【提效工具】AI工作流的1-10个实际落地场景
万物皆有灵
09-09 1115
在这个快速发展的数字时代，人工智能（AI）正在以惊人的速度改变我们的工作方式。无论你是开发者、教育工作者还是内容创作者，AI工作流提示词助手都能为你提供无与伦比的支持。今天，我们将深入探讨，20个实际落地场景，帮助你更好地理解如何利用这些工具提升工作效率和创造力。💡。
jmeter之setUP、tearDown线程组
回家吃月饼的学习交流地
09-07 579
jmeter之setUP、tearDown线程组的使用
问题： java.sql.SQLException：The server time zone value ‘�й���׼ʱ��‘
m0_74293254的博客
09-08 333
译文: Mybatis Plus服务器时区值“h”无法识别或表示多个时区。如果希望利用时区支持，必须配置服务器或JDBC驱动程序(通过serverTimezone配置属性)以使用更具体的时区值。出现上述问题后，一般为数据库连接的url地址配置中，没有配置时区serverTimezone=UTC或配置错误，修改下即可。
基于SpringBoot的旅游管理系统
heye0910032的博客
09-08 466
随着科技的发展，旅游管理系统的信息化成为提升旅游服务效率的关键。本系统采用JSP技术和SpringBoot框架，结合MySQL数据库，旨在实现一个功能全面、操作简便、安全可靠的旅游管理平台。系统通过需求分析、系统设计、功能实现和测试，确保了良好的用户体验和数据处理能力，为旅游业务的现代化管理提供了强有力的技术支持。本研究成功开发了一个基于SpringBoot的旅游管理系统，该系统通过集成多种旅游管理功能，显著提高了旅游服务的效率和质量。系统的用户友好界面和强大的后端功能，使得管理员和用户都能从中受益。
币安/OK现货合约量化系统APP开发
I592O929783的博客
09-08 575
后端：考虑系统需要处理大量实时数据和高频交易的特点，选择高性能的编程语言和技术框架，如Python的Django或Flask框架，Java的Spring Boot等。用户交互界面：设计直观易用的用户交互界面，包括交易界面、策略配置界面、风险管理界面等，方便用户进行交易操作、策略配置和风险管理。市场数据接入：开发市场数据接入模块，从币安等交易所或数据服务商获取实时的市场数据，包括行情数据、订单簿数据、成交数据等。前端：选择适合开发复杂界面的前端框架，如React、Vue.js等，以提供用户友好的交互界面。
MySQL MHA
2201_75549363的博客
09-09 860
该参数代表忽略上次 MHA 触发切换产生的文件，默认情况下，MHA 发生切换后会在日志记录，也就是上面设置的日志app1.failover.complete文件，下次再次切换的时候如果发现该目录下存在该文件将不允许触发切换，除非在第一次切换后收到删除该文件，为了方便，这里设置为--ignore_last_failover。master_ip_failover_script=/usr/local/bin/master_ip_failover　　#设置自动failover时候的切换脚本，也就是上面的那个脚本。
110个oracle常用函数总结
最新发布
m516387177的博客
09-12 560
nvl2 (expr1, expr2, expr3) ->expr1不为null，返回expr2；为null，返回expr3。nvl(expr1, expr2)->expr1为null，返回expr2；不为null，返回expr1。求最大值,all表示对所有的值求最大值,distinct表示对不同的值求最大值,相同的只取一次。求最小值,all表示对所有的值求最小值,distinct表示对不同的值求最小值,相同的只取一次。nullif (expr1, expr2) ->相等返回null，不等返回expr1。
Ruoyi Cloud 本地启动
maplecsd的博客
09-09 2031
参考 http://doc.ruoyi.vip/ https://gitee.com/y_project/RuoYi-Cloud https://blog.csdn.net/cs_dnzk/article/details/135289966 https://doc.ruoyi.vip/ruoyi-cloud/cloud/seata.html#%E5%9F%BA%E6%9C%AC%E4%BB%8B%E7%BB%8D 拉取代码本地跑通 用 git 从 ruoyi 微服务版仓库拉取代码：https://gitee
MyBatis面试
Tony_yitao的博客
09-09 730
MyBatis面试
转行软件测试工程师经验总结
2402_84109700的博客
09-12 439
数据安全官，CCRC-DSA数据安全评估师，CCRC-DCO数据合规官，CDO首席数据官, ITSS IT服务项目经理，IT服务项目工程师，ISO27001,CISP,软考,CISAW应急服务方向,CISAW渗透测试方向,软考,CCSC网络安全能力,工信部教考中心计算机网络安全相关认证办理。在测试理论方面，要熟悉常用的测试用例设计方法，理解不同测试类型的特点，掌握测试用例的基本格式，以及测试结束的标准。最终，我如愿以偿地加入了一家互联网公司，这里的办公环境优越，薪资也较之前的工作有所提升，使我心情愉悦。
【Python系列】使用切片移动元素位置
檀越的博客
09-06 1389
在 Python 中，切片是指从序列类型（如列表、字符串、元组等）中提取子序列的过程。start：切片开始的位置（包含该位置）。如果省略，切片从序列的开始位置开始。stop：切片结束的位置（不包含该位置）。如果省略，切片一直取到序列的末尾。step：步长，即选取元素的间隔。如果省略，默认为 1，即依次选取每个元素。# 假设列表名为 my_list# 将第1个元素移动到末尾# 假设列表名为 my_list# 弹出第二个元素并添加到列表末尾# 假设列表名为 my_list。
springboot数据库连接由localhost改成IP以后访问报错500（2024/9/7
不起眼小菜菜的博客
09-07 339
步骤很详细，直接上教程……
[快速入门] 使用 MybatisPlus 简化 CRUD 操作
CSDN@YuanDaiMa2048的博客
09-09 480
在这个文章中，将介绍如何使用 MybatisPlus 来简化常见的 CRUD（增删改查）操作。MybatisPlus 是 MyBatis 的增强工具，提供了许多便利的功能，让我们能够更轻松地与数据库交互。下面将一步步介绍如何使用 MybatisPlus 完成基本的增删改查操作。
监控平台总结之面试常问&答案
dlnu2015250622的博客
09-06 1067
数据采集层:SDK: 在前端集成的SDK 负责采集数据，包括性能指标、用户行为、错误日志等。数据收集: 实现高效的数据采集机制，支持实时数据传输，可能使用fetch、XHR 或 Beacon等 API。数据处理层:数据通过 HTTP 或 WebSocket 发送到服务器，确保传输的可靠性和安全性。数据存储数据存储在数据库中，例如关系型数据库（MySQL）或 NoSQL 数据库（MongoDB）根据需要选择。数据分析层（需要借助大数据，目前不需要提）:数据处理: 对采集到的数据进行处理和分析。
mycat双主高可用架构部署-水评分表-范围分片配置
龙哥·三年风水从2011年开始做IT工作，从ps画图到前端开发->后端开发->框架开发->业务架构设计及开发->业务需求整理、开发->技术经理->技术总监
09-11 1228
mycat双主高可用架构部署-水评分表-范围分片配置
OpenJDK 8 安装指南
专注于全栈开发领域
09-12 1065
在分布式系统中，Apache Kafka 是一个非常受欢迎的消息中间件。它提供了高吞吐量、低延迟的消息传递机制，非常适合处理实时数据流。本文将介绍如何在 Java 中使用 Kafka Producer 并实现单例模式，以确保资源的有效管理。Kafka 是一个分布式流处理平台，它的核心功能包括发布和订阅记录流、存储流记录、以及处理流记录。为了充分利用 Kafka 的功能，一个高效的 Kafka 生产者（Producer）是必要的。
SpringBoot总结
2302_77073236的博客
09-06 311
都做成图了，方便理解和掌握全局关系。
使用视图方式操作MySQL数据表
m0_64148419的博客
09-06 1081
学习使用视图方式操作MySQL数据表
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值