![](https://img-blog.csdnimg.cn/20201014180756919.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
AI算法#大模型
文章平均质量分 84
BaiYunTu.COM
BaiYunTu.COM 我在这里
展开
-
【2024】大模型LLM和应用程序开发必备的Python库
NLP 和 ML 模型集成:Transformers 和 spaCy 等库对于集成预训练的 NLP 模型至关重要,展示了各种应用程序向更复杂、上下文感知的语言模型的转变。LLM 应用框架:Haystack 和 LangChain 强调了在专门的应用程序框架中使用语言模型的趋势,反映了 LLM 的范围超越传统 NLP 任务的不断扩大。数据预处理和验证:Unstructured 和 Pydantic 等库的加入凸显了对数据质量和完整性的日益重视,这在大数据和复杂 ML 模型时代至关重要。应用程序开发和可视化。原创 2024-07-16 15:53:15 · 679 阅读 · 0 评论 -
基于大模型的豆瓣图书搜索推荐系统
本项目是一个基于大模型的豆瓣图书搜索推荐系统。该系统接收用户输入的URL或文本段落,利用Facebook AI Similarity Search(FAISS)进行索引搜索,并返回数据库中最相似的图书链接。如果输入的是URL,系统将自动运行爬虫抓取书籍信息。所有输入的文本将默认使用Bart模型(或T5模型)进行摘要处理,并通过SentenceTransformer进行编码,将句子和段落映射到384维的密集向量空间。然后,索引搜索算法将比较输入向量和数据库中的向量,返回最相似的前5个结果。最终输出将根据索引从原创 2024-07-09 09:02:56 · 224 阅读 · 0 评论