- 博客(99)
- 资源 (4)
- 收藏
- 关注
![](https://csdnimg.cn/release/blogv2/dist/pc/img/listFixedTop.png)
原创 我的国家级工信部认证 AIGC 证书(导师级)到手啦~
2024 年的知识库质量更是突飞猛进,现在也已更新到 24 万字,在互联网也是数一数二的。国家工信部认证的 AIGC 导师级证书。(重点是裸考的哦,这就是实力)大家都知道,我是国内最早期的 AI2.0 博主之一,2023 年。但是,这些都没有国家认证,于是今年 7 月 6 号,我又考取了。虽然我有这么多能力,我也没有放松下来,与此同时。自费几万元加入了各种AI付费社群学习、交流。AI 知识库分享干货就高达 50 万字。在这里分享一下喜悦,我们一起加油吧~
2024-07-23 11:07:28
705
5
![](https://csdnimg.cn/release/blogv2/dist/pc/img/listFixedTop.png)
原创 大模型训练及推理【硬件选型指南】及 GPU 通识
图形处理单元(GPU)是一种功能强大的电子芯片,用于在沉浸式视频游戏、电影和其他视觉媒体中呈现丰富的 2D/3D 图形和动画因其超越 CPU 的并行矩阵运算性能,所以也被广泛应用于人工智能相关的各种系统,包括机器视觉、NLP、语音识别、自动驾驶等。
2024-04-22 15:26:14
5838
2
原创 Transformer 模型图文详解
Transformer 架构是 google 在 2017 年的 《Attention Is All You Need》 论文中提出,在 NLP 的多个任务上取得了非常好的效果,可以说目前 NLP 发展都离不开transformer。最大特点是抛弃了传统的 CNN 和 RNN,整个网络结构完全是由Attention 机制组成。
2024-08-02 18:24:55
1395
原创 9.11 与 9.9 哪个大? 大模型幻觉从何而来?用最通俗的例子讲清楚大模型原理。
而大模型能否给出答案,就不是时间的问题,要取决于它的训练语料是否有这个知识(庞大的乘法口诀表),或者你的问题当中有没有给他补充知识以及外部工具插件的辅助,如果没有,它就会。其实,大模型训练的原理是大量语料的死记硬背,比如你问大模型 1x9 等于多少,它会很自信的告诉你等于 9,因为它的训练语料中就有“九九乘法表”。这时,这么来看 11 > 9, 但是从数学角度,我们都知道,小数点后面并不能这样比较。所以,学习大模型并不难,关键在于你要找到最系统、最全面、能用最直白的话给你讲明白原理的教程。
2024-08-02 18:05:32
466
原创 重磅!OpenAI发布SearchGPT,挑战谷歌、进军搜索引擎!
此外,SearchGPT在知识的整合和推理方面具有很大优势,通过利用大规模的语料库和机器学习算法,对不同领域的知识进行整合和关联,从而能够提供更全面和深入的答案。这主要是因为,传统搜索引擎主要依赖于关键词匹配来返回相关的结果,而SearchGPT能够更好地理解用户的问题意图,通过对自然语言的深入理解,提供更准确和真实的相关回答。例如,你搜索最好的英语培训公司,在搜索到公司之后,还可以根据它的名字、教育背景、荣誉继续提问,同时能与其他人共享你的搜索,传统搜索引擎根本无法做到这一点。
2024-07-26 09:06:49
436
原创 AI复活,让老照片动起来【数字永生】
AI“复活”实质上是利用人工智能技术,通过对人物已有“形象、声音、语言、思想”等内容的学习,克隆数字化的虚拟人物形象,让人类生命以数字化形式存在。这项技术旨在帮助人们在失去亲人后,通过与逝者的数字化身进行互动,来缓解思念之情和悲痛感。网上示例但数字永生面临技术、伦理和道德的双瓶颈,目前,AI克隆数字人领域的行业标准尚未明晰,企业行为大多依靠自律。因为它可能会引发关于死亡尊严、人类情感真实性、隐私权保护等问题的讨论。
2024-07-25 09:27:00
1262
原创 AI大模型应用落地时 ETL 数据处理 | 解析和拆分
我们在做 RAG 解决方案时,第一就是准备数据,数据清理,然后做文档拆分。而在做文档拆分时,需要我们考虑几个问题,比如支持不同文件类型的拆分、拆分技术的选择、文档拆分常见问题的处理等等。本文将针对这部分进行讲解。对于向量化,向量数据库,相似度检索,RAG 实现请看后面章节。
2024-07-19 09:24:23
839
原创 GPT-3.5退出历史舞台,GPT-4o mini震撼来袭,百万tokens只需要1块钱!
🏆 GPT-3.5 完成了历史使命,退出了历史舞台,3.5 这两年,你辛苦了~⚡️GPT-4o mini⚡️更强的性能,更低的价格,百万tokens只需要1块钱!
2024-07-19 09:09:16
335
原创 Claude 3.5 来了!大杯版本sonnet已超越上代超大杯opus
Claude 3.5 来了!大杯版本sonnet已超越上代超大杯opus。
2024-06-21 16:42:16
535
原创 市值3万亿英伟达的崛起:技术、坚持与市场的力量,厚积薄发的经典案例
在科技领域,英伟达(NVIDIA)的故事无疑是一个厚积薄发的经典案例。作为一家专注于图形处理单元(GPU)的公司,英伟达用31年的时间证明了技术的价值、计算的价值和坚持的价值。本文将详细探讨英伟达如何从一家市值仅22.3亿美元的公司成长为市值突破3万亿美元的科技巨头,以及这一过程对其他科技公司的启示。
2024-06-21 16:38:17
416
原创 大模型「训练」与「微调」概念详解【6000字长文】
1、大模型预训练与微调的基本流程2、预训练、训练、后期预训练、微调的区别3、大模型训练与微调的一些概念,如:Post-pretrain、SFT、RLHF、模型对齐、Lora、Q-Lora、大模型量化、微调指标、微调参数、大模型评测指标在大模型的预训练与微调过程中,我们通常面临如何告诉模型想要什么答案和不想要什么答案的问题(后者往往被大家忽略)。本节将详细阐述大模型预训练与微调的流程,包括预训练、微调的两个阶段(监督式微调SFT和对齐阶段)以及在实际操作中可能遇到的问题和解决方法。总结来说,
2024-06-12 15:26:04
3987
原创 【RAG+通用大模型】 or 【RAG+微调大模型】?企业知识库落地方案如何抉择?
总的来说,当智能客服需要处理的是非常通用、非特定领域的任务,并且不需要深入理解上下文或个性化服务时,RAG加上通用大模型可能就足够了。然而,一旦涉及到特定领域知识、上下文理解、个性化服务、文化差异、法规合规性或者需要持续学习和适应,微调模型就变得非常必要,以确保智能客服能够提供高质量的服务并满足用户的期望。而有时会发现,仍然无法满足预期要求,而到底什么时候才应该选择微调,而不是优化我的 RAG 方案?的确,这个界限很难找,因为你也不知道,是目前你的 RAG 方案本身问题,还是说应该微调的问题。
2024-05-21 22:57:23
529
1
原创 OpenAI 炸出 GPT-4o 新模型,干翻所有语音助手!丝滑如真人引爆全网科幻成真!
CTO Mira Murati登台揭晓的GPT-4o,不仅是一个新模型的亮相,更是对未来的预示。GPT-4o 以其自然流畅的对话,打破了人与机器之间的界限,让交互变得前所未有的真实和融洽。其突破性的多模态交互能力和惊人的反应速度,无疑将极大地推动智能家居等领域的发展,让科幻电影中的场景变为现实。GPT-4o 的出现,将推动智能语音助手行业迈向一个新的高峰,为未来的智能家居等领域带来无限可能。不出意外,ChatGPT准确捕捉了图表中各个方面的关键信息,包括x轴、y轴的信息与范围,以及数据标注的含义。
2024-05-14 10:35:02
685
1
原创 用 LM Studio 1 分钟搭建可在本地运行大型语言模型平台替代 ChatGPT
LM Studio是一个允许用户在本地运行大型语言模型(LLMs)的平台,它提供了一种便捷的方式来使用和测试这些先进的机器学习模型,而无需依赖于互联网连接。脱机:用户可以在自己的笔记本电脑上运行LLMs,完全不需要在线连接。用户界面:LM Studio提供了一个应用内聊天界面,用户可以通过这个界面与模型交互,或者使用一个与OpenAI兼容的本地服务器。模型下载:用户可以从Hugging Face的🤗(即Hugging Face公司)仓库下载任何兼容的模型文件。模型支持。
2024-04-23 20:12:14
3272
原创 关于大模型训练微调的几个概念
SFT 是微调的一种,侧重于有监督的学习,而 RLHF 是一种结合了人类反馈的微调方法,旨在提高模型在复杂任务上的性能。总结来说,Post-pretraining是一个介于预训练和微调之间的训练阶段,它使用大量的领域特定数据来进一步调整模型,使其更好地理解特定领域的语言和任务。预训练的目的是让模型在一个广泛的数据集上学习到一些通用的特征或知识,这些特征或知识可以帮助模型在后续的特定任务上表现得更好。预训练的好处是显著减少了模型在特定任务上训练所需的数据量和时间,同时提高了模型在这些任务上的性能。
2024-04-22 15:28:03
3002
原创 一文详解视觉Transformer模型压缩和加速策略(量化/低秩近似/蒸馏/剪枝)
Transformer,由Vaswani等人引入,以其强大的数据建模能力、可伸缩性以及出色的捕捉长距离依赖性的能力,彻底改变了机器学习。起源于自然语言处理(NLP)领域,取得了机器翻译和文本摘要等方面的成功,Transformer现在将其实用性扩展到计算机视觉任务,如图像分类和目标检测。最近,它们的能力已经在多模态情感分析领域得到了利用,其中它们整合和解释多样的数据流——文字、视觉和声音——以评估情感反应。
2024-04-19 12:56:38
2063
原创 【必收藏】史上最全 Meta Llama 3 相关网址资料
Replicate 70B 模型:meta/meta-llama-3-70b – Run with an API on Replicate。Replicate 8B 模型:meta/meta-llama-3-8b – Run with an API on Replicate。微软 Azure:Microsoft Azure Marketplace。✅ 可直接使用 Llama 3 的平台。✅ 第三方 API 网址。
2024-04-19 11:04:02
806
原创 Meta Llama3 炸裂登场:一夜刷屏AI界,基准测试中一骑绝尘,GPT-4 Turbo遭遇强劲对手
在 2024年4月19 日,AI界迎来了一项重大突破:Meta 公司宣布推出了迄今为止最强大的新一代开源大语言模型 Llama3。这一消息无疑为我国AI产业的发展带来了新的希望和机遇。🎯 Llama3 系列语言模型(LLM)包括Llama3 8B 和 Llama3 70B两个版本,分别,支持 8K 上下文。这两个模型是在两个 24K GPU 定制集群上,使用15万亿tokens数据进行训练的。据 Meta 公司表示,这两个模型分别是 80亿 和 700亿 参数上的最佳表现。此外,一个参数超过。
2024-04-19 10:49:23
1808
原创 讯飞星火低代码可编排助手功能介绍
相比于国外无法访问的那些 Agent 项目,国内讯飞这款绝对是你接触 AI Agent workflow 的最好切入点。先不管它质量好坏,重点是先了解这方面技术的原理,先用起来再说。讯飞星火终于也支持 Agent 工作流了,现正处于邀测阶段。
2024-04-18 14:56:06
383
原创 Transformers 库 与 Transformer 有什么区别?
用途: "Transformers"库是一个提供多种预训练模型和工具的软件库,用于简化和加速NLP任务的开发。而"Transformer"模型是一种特定的深度学习架构,用于处理序列数据,尤其是在NLP领域。范围: "Transformers"库包含多种基于"Transformer"架构的模型以及其他类型的模型,而"Transformer"通常指的是最初提出的那个具有自注意力机制的模型。实现: "Transformers"库提供了一个高级接口,使得用户可以方便地加载、使用和微调各种预训练模型。
2024-04-16 12:14:35
1610
原创 NLP的奥秘:用 Python 揭秘人类语言与人工智能的桥梁【6000 字长文含代码示例】
自然语言处理(NLP)是一门交叉学科,它结合了计算机科学、人工智能和语言学的理论与技术,旨在使计算机能够理解、解释、生成和响应人类语言的内容。NLP 的目标是实现人机交互的自然化,让机器能够像人类一样处理和理解语言。仅用这一篇文章将带您深入了解 NLP 的世界,探索它的核心任务、技术、应用、Python 库实现、挑战以及未来趋势。
2024-04-16 12:09:49
927
原创 LangChain 劲敌强势崛起,Sping AI 震撼发布,AIGC开发终极武器登场!Java 程序员看过来!
该项目从著名的 Python 项目(例如 LangChain 和 LlamaIndex)中汲取灵感,但 Spring AI 并不是这些项目的直接移植。该项目的成立相信下一波生成式人工智能应用程序不仅适用于 Python 开发人员,而且将在许多编程语言中普遍存在。
2024-04-09 23:08:58
1140
原创 程序员也写歌啦
到一分钟,简单的输入一段描述,AI 就帮我完成了 “作词、作曲、演唱”。并且同时给我了男生版以及女生版的 MP3 以及 MP4。其质量甚至超过很多歌手!歌词优美,旋律动听~
2024-03-27 17:50:42
254
原创 PyJWT 登录鉴权最佳实践【Refresh Token】
JWT规定的协议的格式由三部分组成:头部(Header)、负载(Payload)和签名(Signature)。
2024-03-14 10:17:00
1344
原创 【Devin AI】全球首位AI程序员登场,程序员该如何保住饭碗?编程新纪元的革命已到来!
程序员们,警惕!我们的饭碗要被砸了!程序员们,警惕!我们的饭碗要被砸了!一觉醒来,全球首位AI程序员 Devin 上线了!直接引爆整个科技圈。Devin被介绍为世界首个完全自主的AI软件工程师。只需一句指令,它可端到端地构建和部署整个开发项目。Devin 的初创团队更是一支狂揽了10个IOI金牌的金牌团队(规模不大,人才济济)!Devin 已经成功通过一家AI公司面试,并且在Upwork上完成了实际工作。同时,它还可以训练和微调自己的AI模型!
2024-03-14 09:38:28
1659
原创 Claude 3 全新升级:多模态+超长上下文,全球最强大模型一夜易主 GPT-4 时代终结!
Anthropic发布最新动态:崭新Claude 3正式登场!作为OpenAI的主要竞争对手,该模型家族最顶级版本,Claude 3 Opus,被誉为“逼近人类理解力”的代表——在推理、数学、编码、多语言理解和视觉等方面,彻底超越了所有大型模型,包括GPT-4,在行业中重新树立了新的标杆。Sonnet作为次强版本目前可免费体验,而Opus作为最强版本仅供Claude Pro用户使用,但大型模型竞技场可以免费试用。结果,在网友间已经掀起了一股热潮。
2024-03-05 16:47:20
483
原创 Sora 提示词每日分享 | 中英文对照
在一个装饰华丽的历史大厅中,一道巨大的潮汐波峰形成并开始崩溃。两位冲浪者抓住时机,巧妙地在波浪面上航行。目前已持续更新 40 多个 Sora 创意视频 prompt ,需要的评论区留言领取。
2024-02-26 19:04:30
351
原创 Google炸场,推出开“放”可商用的大语言模型Gemma!超级轻量,个人电脑即可运行
Gemma是由Google DeepMind联合Google AI的其他团队共同研发的成果,它基于与Gemini模型相似的研究和技术,构建于序列模型、变换器(Transformer)、基于神经网络的深度学习技术以及分布式系统的大规模训练之上。单从名字上判断,新推出的Gemma与谷歌早前的Gemini模型容易让人混淆。具体而言,在MMLU(多模态学习理解)基准测试中,Gemma 7B不仅超越了所有同等规模或更小规模的开源模型,甚至还超过了一些规模更大的模型,包括Llama 2的13B版本。
2024-02-26 18:37:49
1128
原创 Sora 远比你想象的可怕,它颠覆的不是一个行业而是整个时代!
从DALL·E图像动画到视频到视频编辑,Sora的应用范围广泛,它能够根据文本提示或预先存在的图像和视频进行创作,为内容创造开辟了新的维度。更重要的是,Sora能够模拟现实世界中人、动物和环境的某些方面,这不仅是技术的展示,更是对世界的一次深刻理解和再现。Sora的学习过程与此类似。这种学习能力,让Sora不仅仅是一个生成器,它是一个真正的世界模拟器,学会了如何生成逼真的视频,甚至模拟出复杂的物理现象和社会互动。Sora的能力表明,AI的发展不再局限于简单的任务执行,而是向着理解和模拟复杂世界的方向迈进。
2024-02-22 10:01:57
721
原创 全网第一批「 Sora 提示词和创意视频」中英文对照版它来啦~
用 Sora 创意视频提示词库进行自媒体变现,全网第一批「 Sora 提示词和创意视频」中英文对照版。目前已更新了40 余个创意视频提示词
2024-02-21 12:35:04
547
原创 2024 AI 大模型全栈开发知识体系【LLM 技术栈】
作为一名经验充足的 AI 全栈工程师,2024 年我计划把我的经验总结出一套知识库免费分享给大家,感兴趣的小伙伴可以关注我一起学习。
2024-02-21 10:46:41
2731
阿里巴巴 Java 开发手册(嵩山版).pdf
2020-08-04
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人