自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(283)
  • 收藏
  • 关注

原创 AI 产品经理入门与劝退指南

本文总结了 AI 产品经理入门前的必备须知,以及入门 AI 产品经理前需要建立的初步认知框架。

2024-06-11 14:30:14 670

原创 如何才能成为一个合格的AI产品经理?

如何才能成为一个合格的AI产品经理?

2024-06-11 14:29:00 765

原创 基于LangChain+LLM构建增强QA

基于LangChain+LLM构建增强QA

2024-06-07 11:38:54 625

原创 LangChain 开发LLM的框架

LangChain是一个用于开发由语言模型提供支持的应用程序的框架。上下文感知:将语言模型连接到其他上下文源(提示说明、少量示例、响应内容)推理:依靠语言模型进行推理(关于如何根据提供的上下文回答,采取什么行动等)

2024-06-06 16:42:47 702

原创 LangChain :构建个人AI代理从这里开始

LangChain,一个强大的工具,允许根据用户输入创建对语言模型和其他工具的复杂调用链。就像拥有一个私人助理,可以根据手头的任务做出决定。本文来分享一下在 LangChain 中使用 Agents 的心路历程。

2024-06-06 16:41:34 297

原创 详解AI大模型提示工程(prompt)、向量工程(embedding)、微调工程(fine-tune)

大家都在讨论大模型,似乎什么都可以与大模型结合,可当初学者也想上手时,却面临令人头大的词汇,Prompt、Embedding、Fine-tuning,怎么办呢?别担心,本文就用一种有趣的方式让大家认识它们。

2024-06-05 11:53:47 1367

原创 RAG技术的高级应用和算法

基础RAG:将文本切片并emb后,将所有emb放入索引中,对query进行emb后,根据query emb找到top-k个切片emb,最后query结合top-k个切片一起送入LLM得到结果。注:除了openai,还可以选择Anthropic 的 Claude,Mistral 的小型但功能强大的模型Mixtral,Microsoft 的Phi-2,以及如Llama2,OpenLLaMA,Falcon等模型。

2024-06-05 11:52:46 558

原创 【大模型】在大语言模型的架构中,Transformer有何作用?

Transformer是一种用于序列到序列(Seq2Seq)任务的深度学习模型,由Vaswani等人于2017年提出。

2024-06-04 11:55:15 380

原创 深度学习中的大模型「幻觉」问题:解析、原因及未来展望

大模型幻觉是指在深度学习领域中,尤其是涉及大型神经网络时,模型展现出在理论上不应具备的性能或能力。这种现象可能导致误导性的结果,表现为在训练数据上过度拟合,使得模型在未曾见过的数据上表现异常优秀。

2024-06-04 11:54:02 624

原创 如何利用向量数据库来弥补 LLM 的弱点

向量数据库使企业能够以经济且可持续的方式调整通用大型语言模型以供组织特定使用。

2024-05-31 17:05:48 847

原创 影响生产RAG流水线5大瓶颈

RAG以其增强语言模型知识的能力脱颖而出,使其能够产生更准确、上下文感知和可靠的输出。其应用范围从增强聊天机器人到驱动复杂的数据分析工具,使其成为构建聊天机器人和人工智能代理的重要工具。

2024-05-31 17:05:03 866

原创 LangChain 完整指南:使用大语言模型构建强大的应用程序

LangChain 是一个强大的框架,可以简化构建高级语言模型应用程序的过程。随着大模型的热度不断攀升,LangChain也获得了越来越多的开发人员亲睐。嗨,你好!让我向你介绍LangChain,这是一个非常棒的库,它能让开发者利用大型语言模型(LLMs)和其他计算资源来构建强大的应用。在这份指南中,我将快速概述LangChain的工作原理,并探讨一些很酷的使用案例,例如问答系统、聊天机器人和智能代理。我还会带你走过一个快速启动指南,帮助你开始使用。让我们开始吧!

2024-05-30 16:27:00 1526

原创 开始使用LangChain:帮助你构建LLM驱动应用的新手教程

自从ChatGPT发布以来,大型语言模型 (LLMs) 已经获得了很大的普及。尽管你可能没有足够的资金和计算资源在你的地下室从头开始训练一个LLM

2024-05-30 16:25:19 776

原创 小白windows系统从零开始本地部署大模型全记录

大家好,最近两年大语言模型风靡全球,最近,不少开源大模型,将模型部署到自己的电脑上,用个性化的数据微调想必是不少人的愿望,这次,让我来分享从hugging face上下载部署chatglm3-6b中的经验。

2024-05-29 15:45:39 770

原创 本地部署开源大模型的完整教程:LangChain + Streamlit+ Llama

在过去的几个月里,大型语言模型(llm)获得了极大的关注,这些模型创造了令人兴奋的前景,特别是对于从事聊天机器人、个人助理和内容创作的开发人员。

2024-05-29 15:43:15 943

原创 一分钟白话GPT 系列模型原理

一分钟白话GPT 系列模型原理

2024-05-27 14:58:15 1034

原创 RAG技术已经这么强大了,我们真的还需要微调吗?

本文我们将探索各个PEFT微调技术的原理和特点以及它们分别适合什么样的场景来帮助我们选择更加适合自己的PEFT技术.

2024-05-27 14:55:57 704

原创 RAG 2.0架构详解:构建端到端检索增强生成系统

关于检索增强生成(RAG)的文章已经有很多了,如果我们能创建出可训练的检索器,或者说整个RAG可以像微调大型语言模型(LLM)那样定制化的话,那肯定能够获得更好的结果。

2024-05-25 15:41:22 265

原创 通过RAG架构LLM应用程序

在之前的博客文章中,我们已经描述了嵌入是如何工作的,以及RAG技术是什么。

2024-05-25 15:25:41 417

原创 探索LangGraph:如何创建一个既智能又可控的航空客服AI

这种设计既保持了用户控制权,又确保了对话流程的顺畅。但随着工具数量的增加,单一的图结构可能会变得过于复杂。我们将在下一节中解决这个问题。

2024-05-24 18:28:04 609

原创 大模型最新黑书:大模型应用解决方案: 基于GPT-3、ChatGPT、GPT-4等Transformer架构的自然语言处理 PDF

今天给大家推荐一本丹尼斯·罗斯曼(Denis Rothman)编写的关于大语言模型(LLM)权威教程!Google工程总监Antonio Gulli作序,这含金量不用多说,在这里给大家强烈推荐一下这本黑书,下面直接开始介绍!

2024-05-24 16:40:38 2047

原创 RAG项目第五集:前端页面的开发和展示

RAG项目第五集:前端页面的开发和展示

2024-05-23 10:30:00 919

原创 RAG项目第四集:RAG功能的实现

既然是检索增强生成,我们主要是让大模型根据现有的知识图谱回答用户的问题,所以开发逻辑分3部分

2024-05-23 09:00:00 630

原创 RAG项目第三集:自定义LLM大模型类的构建

这些大型预训练模型,如GPT-3、BERT、XLNet等,以其强大的语言理解和生成能力,正在改变我们对人工智能的认识。这套包含640份报告的合集,涵盖了AI大模型的理论研究、技术实现、行业应用等多个方面。无论您是科研人员、工程师,还是对AI大模型感兴趣的爱好者,这套报告合集都将为您提供宝贵的信息和启示。作为一名热心肠的互联网老兵,我意识到有很多经验和知识值得分享给大家,也可以通过我们的能力和经验解答大家在人工智能学习中的很多困惑,所以在工作繁忙的情况下还是坚持各种整理和分享。

2024-05-23 07:45:00 1737

原创 RAG项目第二集:知识图谱embedding到向量数据库

网上很多文章都是讲把数据集嵌入到向量数据库后,直接在页面查询,虽然可以作为学习使用,但是不符合应用场景,用户都知道答案了,为啥还需要问大模型啊。所以笔者认为,应该是it或者业务部门构建企业的数据集后,先embdding到向量数据库内,在给大模型的提示中,写明,让大模型根据检索数据回答。

2024-05-22 18:23:25 385

原创 RAG项目第一集:大模型的本地加载和提供API接口

于这个项目来说,因为考虑到数据不能出公司,所以不能用OPENAI的模型和接口,选择开源的大模型成了首要的问题,可根据显卡等配置的具体情况,选择不同参数的模型,笔者测试了llama2的13B模型,感觉不错,但是FASTCHAT不支持4Bite量化,所以改成了阿里的通义千问7B,也可以更好的理解中文。

2024-05-22 18:22:47 442

原创 产品经理必备知识——API接口

进入互联网时代之后,API接口的出现为不同应用程序搭建起了桥梁,那么,你是否真的了解API呢?

2024-05-20 13:39:36 1029

原创 产品经理如何迎接AI浪潮?

AI人工智能技术的发展给产品经理的工作带来了许多机遇和挑战,那么作为时代中的个体,产品经理要怎么迎接AI浪潮的到来?这篇文章里,作者说了说他的看法和见解,一起来看看吧。

2024-05-20 11:56:33 553

原创 AI 产品经理和 AIGC 产品经理有什么区别,怎么选择?

AI 和 AIGC 行业两个行业带动了产品经理的的能力提升,那AI产品经理与AIGC产品经理两者中间有什么区别的呢?下面一起来看一下,之间的不同之处吧!

2024-05-20 11:50:32 784

原创 大语言模型LLM何去何从?

大模型的未来发展方向是怎么样的?这篇文章里,作者分享了几条主线,并围绕这些主线做了一些思考和分析,不妨来看一下。

2024-05-18 14:46:45 272

原创 产品经理必须懂得AI:prompts提示工程之五大经典框架

在数字化时代,了解AI提示词工程,有助于设计更智能的交互,优化产品功能,提升用户体验。本文总结了prompts提示工程之五大经典框架,希望对你有所启发。

2024-05-18 14:44:27 366

原创 大语言模型(LLM)产品开发流程清单

如今,大模型技术就像一把神奇的钥匙,为产品开发打开了新世界的大门。无论是个人开发者想要借助这项技术来提升自己的技能和打造酷炫的产品,还是企业团队希望通过它在商业战场上取得竞争优势,都得学会运用大模型进行产品的全流程开发。

2024-05-18 14:43:21 294

原创 大模型提示(Prompt)优化新方法IPC:可根据用户意图进行定向优化

由于大语言模型(LLMs)对给定的提示比较敏感,并且文本任务指令本身就存在歧义性。为了能够让LLMs发挥出最佳性能,自动提示(Auto-Prompt)工程至关重要。

2024-05-17 17:07:23 639

原创 【AI大模型】Prompt Engineering 基础知识与挑战

Prompt Engineering,即提示工程,是一种新兴的技术领域,它主要研究如何设计有效的提示(Prompt)来引导用户生成特定的输出。随着自然语言处理技术的快速发展,特别是预训练语言模型(如 GPT-3)的崛起,Prompt Engineering 变得越来越重要。本文将介绍 Prompt Engineering 的一些基础知识,并分享一些思考。

2024-05-17 16:51:01 542

原创 【玩转 GPU】本地部署大模型--chatGLM(尝鲜篇)

本文主要介绍ChatGLM-6B 的本地部署,提供更保姆级别的教程,让完全不懂技术的同学,也能在本地部署大模型~在19年曾经尝试过使用,当时就被大模型效果惊艳到啊,只是没想到短短3年多,大模型效果提升这么快。学不完,根本学不完…大模型实在太火了,终于还是忍不住对它下手。今天介绍如何在本地部署大模型尝鲜,后面有时间会持续出大模型技术原理篇。大语言模型(Large Language Model),是一种人工智能模型,旨在理解和生成人类语言。

2024-05-17 16:47:54 866

原创 5分钟打造基于 LangChain+Gradio 的个人知识助理

一直在研究大模型的 langchain 编程和检索增强相关的内容,今天和大家分享一些**如何在5分钟之内利用 LangChain+Gradio 搭建一个自己的个人知识助理**。这听起来就很酷,我们不需要依赖其他第三方提供的服务,也可以保证自己数据的安全性,赶紧顺着本文往下看吧。

2024-05-16 16:06:51 309

原创 基于知识库和 LLM 的问答系统经验分享

最近一直在做检索增强和问答系统的内容。今天给大家分享一些关于LLM和知识库相结合的技巧和使用场景,提供一些信息增量。江湖经验,欢迎有相关经验和感兴趣的伙伴一起交流学习。

2024-05-16 16:05:50 285

原创 从零开始入门 LangChain

本篇文章中将和大家讲述什么是 LangChain ,以及 LangChain 解决了现在大模型发展的哪些问题,然后会讲解LangChain 中基础的概念和组件。在此基础上,我们会深入的分析一下 LangChain 具体有哪一些优势,最后,将向大家介绍一些开源的基于 LangChain 的项目,来感受这个框架在实际产品中是如何使用和落地的。

2024-05-16 16:04:53 904

原创 Token 计费与计算、tiktoken介绍

每个模型都具有不同的功能和价格。价格是按照每1000个 Token 计算的。您可以将Token视为单词的组成部分,其中1000个Token 大约相当于750个单词。(这段文字包含35个Token)

2024-05-14 20:39:00 753

原创 OpenAI语言模型总览

OpenAI语言模型总览

2024-05-14 20:35:01 666

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除