- 博客(7)
- 收藏
- 关注
RSS订阅原创 创新项目实训调研（一）
其次，文档的类型和用户查询的长度及复杂性也是决定分块大小的重要因素。在不考虑大模型输入长度限制和成本问题情况下，其目的是在保持语义上的连贯性的同时，尽可能减少嵌入内容中的噪声，从而更有效地找到与用户查询最相关的文档部分。：既然小的分块和大的分块各有各的优势，一种更为直接的解决方案是把同一文档进行从大到小所有尺寸的分割，然后把不同大小的分块全部存进向量数据库，并保存每个分块的上下级关系，进行递归搜索。总之，RAG的性能不仅取决于原始文本数据的数量，还受到外部知识库的质量、文本分块策略和检索效率的影响。
2024-06-22 12:51:19
757
原创 创新项目实训记录（四）
接上一篇的博客，上一篇的博客中对chatgml3-6b模型进行了微调，在这篇博客中介绍如何将微调后的模型包装成接口，并提供给我们的网站使用。
2024-06-22 12:49:31
114
原创 创新实训项目博客
本项目的目标是使用RAG技术和现有LLM开发一个具有心理方面专业知识的心理行业大模型，并基于此开发一个具有日志分析总结、相关推荐、对话等功能的心理日志APP。这里先占一个博客，后续会随着项目开发的进行及时更新补充内容。
2024-03-26 18:37:09
175
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人