大模型学习?别慌!我这有份独家私藏路线图,直接抄作业!
最近大模型是真火啊, 搞得我这老码农都跃跃欲试,想搭上这班通往未来的列车。 But… 看着那些密密麻麻的技术名词,那叫一个头大!
别怕,咱也是从小白过来的, 走过弯路,踩过坑,才搞明白点门道! 今天,我把这份独家私藏的大模型学习路线图分享给大家, 绝对干货! 保证你不再迷路, 还能少走弯路!
这份路线图,我给它分了三个阶段: 入门、上手、深挖。 你是想快速尝鲜应用,还是想深入了解原理?都给你安排的明明白白!
第一站: 入门篇(小白友好版)
这个阶段, 主要是带大家了解大模型的“前世今生”, 不用担心什么数学公式,咱就用大白话聊聊, 顺便上手操作一下。
学习目标:
-
• 搞懂大模型的基本概念,专业名词啥的都得略懂一二。
-
• 能用代码调通大模型接口就行,先别想着自己造轮子。
-
• 用最通俗易懂的方式,让你明白大模型到底是个啥。
必备技能点:
-
- OpenAI API 账号 & 稳定的梯子: 这不用多说了吧,想玩大模型,这是标配!当然如果你只想玩开源的,可以看看我下面推荐的
openrouter.ai
这个网站。
- OpenAI API 账号 & 稳定的梯子: 这不用多说了吧,想玩大模型,这是标配!当然如果你只想玩开源的,可以看看我下面推荐的
-
- 注册 https://openrouter.ai/: 一键访问各种大模型,闭源开源的都有,方便你试水。
推荐学习资料:
-
• 《ChatGPT Prompt Engineering for Developers》: 别被名字吓到,这个是Prompt入门神书。虽然是讲怎么写prompt,但里面很多基础知识,对新手很友好。
-
• 中文版传送门: https://github.com/GitHubDaily/ChatGPT-Prompt-Engineering-for-Developers-in-Chinese
-
• OpenAI Quickstart [必看]: 官方出品,质量绝对有保障! 文档和API参考, 绝对让你少走弯路。
-
• State of GPT [必看]: GPT联合创始人做的演讲, 把GPT的来龙去脉讲的明明白白。
-
• 视频链接: https://www.youtube.com/watch?v=bZQun8Y4L2A
-
• PPT 链接: https://karpathy.ai/stateofgpt.pdf
第二站: 应用篇(实战操练开始!)
这阶段,我们要开始动真格的了! 告别“纸上谈兵”,开始搭建自己的大模型应用!
学习目标:
-
• 可以在本地搭建开源模型的推理环境, 跑起来再说!
-
• 了解大模型应用开发框架, 比如 LangChain 和 Dify ,学会用 “工具” 提升效率。
-
• 掌握 Prompt 工程、RAG、Agent 这几个大模型应用开发“模版”, 快速上手!
推荐学习资料:
-
• 《Building Systems with the ChatGPT API》: 了解如何用 ChatGPT API 构建应用。
-
• 中文版: https://www.bilibili.com/video/BV1gj411X72B/
-
• Langchain: 大模型应用开发框架中的 “扛把子”, 即使不直接用,它的设计理念也值得学习。
-
• 中文版: https://www.bilibili.com/video/BV1Ku411x78m/
-
• dify: 开源的应用编排工具, 适合快速搭建应用原型。
-
• GPT best practices: OpenAI 官方的最佳实践指南, 都是血泪教训总结出来的, 务必拜读!
-
• openai-cookbook: OpenAI 官方 Cookbook, 里面有各种 Demo 可以参考。
-
• Brex’s Prompt Engineering Guide: Prompt 工程入门级教程, 帮你快速入门。
第三站: 深入篇(进阶打怪)
如果你不满足于 “调包侠”, 想要深入了解大模型背后的技术原理, 那就来这站吧! 做好啃硬骨头的心理准备!
学习目标:
-
• 掌握大模型技术原理,包括训练、微调、数据工程、推理优化等。
-
• 了解大模型应用范式的最新进展,比如 RAG 和 Agent 的 “高阶玩法”。
推荐学习资料:
3.1 大模型技术基础方向
-
• 《动手学深度学习》 [必看]: 如果你连深度学习都不懂, 建议从这里开始! 强烈建议配合B站李沐老师的视频, 效果更佳!
-
• 深度学习:台湾大学李宏毅: 李宏毅老师的课, 讲的既清楚又有趣, 强烈推荐!
-
• 3blue1brown 系列视频 [必看]: 用动画的方式讲解数学和机器学习概念, 非常直观! 看一遍不够, 多看几遍!
3.2 大模型技术原理方向
-
• 大语言模型综述 [必看]: 学术界总结的关于大模型的中文综述, 目前最好最权威的! 不看后悔!
-
• 《大语言模型》 [必看]: 目前最好的大模型书籍, 没有之一!
-
• 《大规模语言模型:从理论到实践》: 另一本不错的中文书籍, 可以和 上面那本一起看。
-
• 清华大模型公开课第二季 [必看]: 让你对大模型的历史、原理和前沿发展有个全面的了解! 不看亏大了!
-
• GPT,GPT-2,GPT-3 论文精读: 不想啃英文论文?这里有精读版! 直接给你讲明白!
-
• Llama3.1 论文精读: 了解开源大模型就从这里开始, 性能又好,又开源, 简直良心大大的。
-
• 《复杂推理:大语言模型的北极星能力》: 稍微有点学术, 但是可以帮你理解大模型能力的来源。
-
• ICML 2024 Tutorial: Physics of Language Models by Zeyuan Allen-Zhu [必看]: 用“黑盒”的方式研究大模型原理, 角度很新颖, 非常有参考价值!
3.3 大模型训练微调方向
-
• 《Build a Large Language Model (From Scratch)》[必看]: 教你从零开始构建大模型, 实践出真知!
-
• LLaMA-Factory [必看]: 微调大模型的利器! 简单好用, 必须掌握!
-
• MAP-NEO: 唯一开源全流程的中文大模型! 良心!
3.4 大模型数据工程方向
-
• 《How to Generate and Use Synthetic Data for Finetuning》: 告诉你怎么合成微调数据。
-
• 中文行业预训练语料 IndustryCorpus 2.0: 亮点在于预训练数据的处理流程很科学!
3.5 大模型推理优化方向
-
• 《Challenges in Deploying Long-Context Transformers: A Theoretical Peak Performance Analysis》[必看]: 分析大模型推理速度的瓶颈, 让你了解如何加速模型!
-
• 《A Visual Guide to Quantization》: 大模型量化教程, 不懂的快来补补!
3.6 大模型应用方向
-
• 《A Survey of Prompt Engineering Methods in Large Language Models for Different NLP Tasks》: Prompt 工程综述文章, 让你了解各种不同的 Prompt技巧!
-
• 《Modular RAG: Transforming RAG Systems into LEGO-like Reconfigurable Frameworks》: 教你如何高级优化 RAG。
-
• 《LLM Powered Autonomous Agents》: Agent方向的早期经典文章!
最后,我想说
大模型学习之路, 道阻且长, 但只要你坚持下去, 一定会有收获。 这份路线图算是我的私藏干货, 如果对你有帮助, 就点个赞吧! 别忘了分享给身边的小伙伴!
✨ 划重点:
本路线图为你提供了学习大模型的全面指南, 从入门到进阶, 涵盖理论到应用。 记得收藏起来, 随时查阅。 如果你懒得自己找资料, 我的路线图直接“抄作业”就对了!
AI大模型学习路线
如果你对AI大模型入门感兴趣,那么你需要的话可以点击这里大模型重磅福利:入门进阶全套104G学习资源包免费分享!
扫描下方csdn官方合作二维码获取哦!
这是一份大模型从零基础到进阶的学习路线大纲全览,小伙伴们记得点个收藏!
第一阶段: 从大模型系统设计入手,讲解大模型的主要方法;
第二阶段: 在通过大模型提示词工程从Prompts角度入手更好发挥模型的作用;
第三阶段: 大模型平台应用开发借助阿里云PAI平台构建电商领域虚拟试衣系统;
第四阶段: 大模型知识库应用开发以LangChain框架为例,构建物流行业咨询智能问答系统;
第五阶段: 大模型微调开发借助以大健康、新零售、新媒体领域构建适合当前领域大模型;
第六阶段: 以SD多模态大模型为主,搭建了文生图小程序案例;
第七阶段: 以大模型平台应用与开发为主,通过星火大模型,文心大模型等成熟大模型构建大模型行业应用。
100套AI大模型商业化落地方案
大模型全套视频教程
200本大模型PDF书籍
👉学会后的收获:👈
• 基于大模型全栈工程实现(前端、后端、产品经理、设计、数据分析等),通过这门课可获得不同能力;
• 能够利用大模型解决相关实际项目需求: 大数据时代,越来越多的企业和机构需要处理海量数据,利用大模型技术可以更好地处理这些数据,提高数据分析和决策的准确性。因此,掌握大模型应用开发技能,可以让程序员更好地应对实际项目需求;
• 基于大模型和企业数据AI应用开发,实现大模型理论、掌握GPU算力、硬件、LangChain开发框架和项目实战技能, 学会Fine-tuning垂直训练大模型(数据准备、数据蒸馏、大模型部署)一站式掌握;
• 能够完成时下热门大模型垂直领域模型训练能力,提高程序员的编码能力: 大模型应用开发需要掌握机器学习算法、深度学习框架等技术,这些技术的掌握可以提高程序员的编码能力和分析能力,让程序员更加熟练地编写高质量的代码。
LLM面试题合集
大模型产品经理资源合集
大模型项目实战合集
👉获取方式:
😝有需要的小伙伴,可以保存图片到wx扫描二v码免费领取【保证100%免费】🆓