福福很能吃-CSDN博客

原创 Sora到底是什么？Sora详解：一文带你熟悉Sora_sora介绍

基本概念自2015年成立以来，OpenAI已经成为人工智能研究与推广的领军机构。这家机构在深度学习、自然语言处理等多个前沿领域不断取得重大突破，引领着行业的发展潮流。特别是通过其GPT-4等先进模型的开发，OpenAI不仅巩固了自己在人工智能技术创新与应用开发方面的领导地位，更展现了其对AI技术安全和伦理发展的深切承诺。OpenAI致力于利用这些突破性技术造福全人类，为构建一个更智能、更安全的未来而努力。（PS：如果你需要开通ChatGPT-4.0的话，请查看：ChatGPT订阅、升级教程）2024

2024-08-08 14:47:16 1364

原创大模型核心技术原理 Transformer架构详解

在大模型发展历程中，有两个比较重要点：第一，Transformer 架构。它是模型的底座，但 Transformer 不等于大模型，但大模型的架构可以基于 Transformer；第二，GPT。严格意义上讲，GPT 可能不算是一个模型，更像是一种预训练范式，它本身模型架构是基于 Transformer，但 GPT 引入了“预测下一个词”的任务，即不断通过前文内容预测下一个词。之后，在大量的数据上进行学习才达到大模型的效果。

2024-08-08 14:46:23 1043

原创别焦虑，这份初学者入门大语言模型（LLM）教程学习路线给你做好了_如何让大模型学会语法

真的想入门大语言模型，只看这一个文章应该是可以入门的。但是修行下去，还是要靠自己的了！如果你把大语言模型/LLM 当成一门技术来看，那就要看一下这门技术需要什么。这些东西我们假定你都已经会了，或者熟练使用了。如果不熟，我建议你自己再学习一下。尤其是数学的几个基本公式，是要学会的。我列一下吧。

2024-08-08 14:45:50 904

原创【人工智能LLM】开源 LLM 大模型汇总以及微调策略_有哪些开源的大模型可以微调(1)

自从ChatGPT出世以来，各个大厂/研究院都纷纷推出自己的大模型，大模型领域发展一日千里。随着“百模大战”热度的降低，有必要梳理一下目前主流的大模型以及其变种模型，为大家梳理一下当前开源模型的工作。

2024-08-06 10:36:01 1196

原创大模型到底微调个啥？技术含量有多大？深度解析全面综述！_大模型微调

大型模型代表了多个应用领域的突破性进展，能够在各种任务中取得显著成就。然而，它们前所未有的规模带来了巨大的计算成本。这些模型通常由数十亿个参数组成，需要大量的计算资源才能执行。特别是，当为特定的下游任务定制它们时，特别是在受计算能力限制的硬件平台上，扩展的规模和计算需求带来了相当大的挑战。参数有效微调（PEFT）通过在各种下游任务中有效地调整大型模型，提供了一种实用的解决方案。特别是，PEFT是指调整预先训练的大型模型的参数，使其适应特定任务或领域，同时最小化引入的额外参数或所需计算资源的数量的过程。

2024-08-06 10:35:20 1085

原创大模型到底能干啥，不能干啥？_大模型不能做到什么

举例：高精确度：中国的首都是哪里？北京。低精确度：请一句话赞美上海。上海，这座璀璨的东方之珠，以其独特的魅力、繁荣的经济和深厚的文化底蕴，展现了无与伦比的现代都市风采。特点：高精确度的结果一般是有正确参考答案的，像人的理性思考。低精确度的结果，一般没有正确回答，怎么回答都可以，像人的感性思考。

2024-08-06 10:34:31 795

原创 AI大模型入门基础教程（非常详细），AI大模型入门到精通，收藏这一篇就够了！

AI大模型，简而言之，是基于深度学习技术的庞大规模数据与计算能力孕育出的智能模型。这些模型的特别之处在于它们不仅参数量级的庞大，常常跨越亿计，而且在处理复杂度上也远超乎想象。正是这种规模和复杂性，使得它们在诸如自然语言理解、图像识别、语音识别等领域展现出卓越的准确性和泛化的处理能力，几乎可比拟的泛化应用范围。

2024-07-29 14:37:35 687

原创 AI大模型变革职场：职场人迎来的双刃剑——惊喜与挑战并存

AI大模型的到来，就像是给职场带来了一场"惊喜派对虽然它带来了一些"惊吓"，但更多的是惊喜和机遇。作为职场人，我们需要拥抱变化，不断提升自己，才能在这个派对中成为最耀眼的明星。记住，AI可以取代我们的工作，但它永远取代不了我们的智慧和幽默。那么，我们该如何学习大模型？作为一名热心肠的互联网老兵，我决定把宝贵的AI知识分享给大家。至于能学习到多少就看你的学习毅力和能力了。我已将重要的AI大模型资料包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。

2024-07-29 14:36:40 262

原创【微调大模型】如何利用开源大模型，微调出一个自己大模型_大模型训练和微调框架

最近对大模型这部分内容比较感兴趣，作者最早接触大模型是22年下半年的时候。当时觉得非常amazing，并认为这是一个颠覆性的工作，目前随着开源大模型的逐渐变多。我觉得我们得学习并了解这些基础知识，以便后续在工作中可以学习并使用。在深度学习中，微调是一种重要的技术，用于改进预训练模型的性能。除了微调ChatGPT之外，还有许多其他预训练模型可以进行微调。微调所有层：将预训练模型的所有层都参与微调，以适应新的任务。微调顶层：只微调预训练模型的顶层，以适应新的任务。冻结底层。

2024-07-29 14:35:58 427

原创 AI大模型的预训练、迁移和中间件编程_ai 中间件

OpenAI 在 2022 年 11月推出了人工智能聊天应用—ChatGPT。它具有广泛的应用场景，在多项专业和学术基准测试中表现出的智力水平，不仅接近甚至有时超越了人类的平均水平。这使得ChatGPT 在推出之初就受到广大用户的欢迎，被科技界誉为人工智能领域的新里程碑。人们在为生成式人工智能所带来的多模态内容创作效率的提升而欢呼时，常常低估ChatGPT的推理能力。

2024-07-26 15:26:21 426

原创 10分钟建立一个自媒体秘书——国产企业级大模型文心千帆初体验_文心大模型和文心千帆的区别

首先介绍一下文心千帆。文心千帆大模型平台是百度智能云推出的全球首个一站式企业级大模型平台，为企业提供大模型训练及推理的全流程工具链和整套环境，让企业以最简单最高效的方式用上大模型、用好大模型。在文心千帆上，企业不但可以直接调用文心一言服务，也可以开发、部署和调用自己的大模型服务，是企业拥抱大模型的最佳选择。与我们之前了解过的文心一言不同，文心千帆大模型平台是百度文心大模型的官方和唯一的商业化服务平台。对内及对外统一由文心千帆来提供服务，文心千帆从数据服务（生成、标注、回流）、模型训练（

2024-07-26 15:25:38 988

原创【人工智能LLM】开源 LLM 大模型汇总以及微调策略_有哪些开源的大模型可以微调(1)

自从ChatGPT出世以来，各个大厂/研究院都纷纷推出自己的大模型，大模型领域发展一日千里。随着“百模大战”热度的降低，有必要梳理一下目前主流的大模型以及其变种模型，为大家梳理一下当前开源模型的工作。

2024-07-26 15:24:17 780

原创多模态大模型入门指南（非常详细）零基础入门到精通，收藏这一篇就够了

内容总结，本篇综述主要介绍和分析了以下几个方面：• 概述了MM-LLMs的设计形式，将模型架构分为5个部分：模态编码器、输入投影器、语言模型骨干、输出投影器和模态生成器。阐述了每一部分的实现选择。• 描述了MM-LLMs的训练流程，主要包括多模态预训练和多模态指令微调两个阶段。• 总结分析了26种主流的MM-LLMs模型，从模型架构、训练数据集规模等多个维度进行了对比。• 综合回顾了主要MM-LLMs在18个广泛使用的视觉语言评测集上的表现，并总结提炼出提升模型效果的重要训练方法。

2024-07-24 14:24:08 930

原创如何系统的入门大模型？

随着人工智能技术的飞速发展，大模型，尤其是在自然语言处理（NLP）领域的变革性影响，已经引起了广泛的关注。本文将详细介绍如何系统地入门和学习大模型，帮助初学者有效地掌握这一前沿技术。通过遵循以上步骤，你可以系统地入门和掌握大模型。此外，保持好奇心和持续学习的态度对于在AI领域取得成功至关重要。

2024-07-24 14:23:27 535

原创大模型到底能干啥，不能干啥？_大模型不能做到什么

举例：高精确度：中国的首都是哪里？北京。低精确度：请一句话赞美上海。上海，这座璀璨的东方之珠，以其独特的魅力、繁荣的经济和深厚的文化底蕴，展现了无与伦比的现代都市风采。特点：高精确度的结果一般是有正确参考答案的，像人的理性思考。低精确度的结果，一般没有正确回答，怎么回答都可以，像人的感性思考。

2024-07-24 14:22:53 1404

原创 Llama 3无限使用！喂饭级本地部署教程，零成本爽翻天_llama3怎么喂数据

近日，真正的“OpenAI”——Meta公司，对“Close AI”进行了有力回应，推出了其开源大模型系列的最新力作——更是青出于蓝，不仅在技术层面实现了对的重大突破，还在各种评估测试中展现出令人瞩目的表现。这标志着AI技术又迈出了坚实的一步。目前，推出了两个版本，分别是8B和70B。在与同等级别的Gemma和Mistral开源模型较量中，8B版本展现出了显著的优势。至于70B版本，它在与Gemini Pro 1.5及Claude的Sonnet模型的比拼中，表现得旗鼓相当，难分伯仲。

2024-07-22 15:12:31 1139

原创为什么说国产大模型的野心，都藏在 MaaS 的生态中

2016 年 4 月，在一场由 IDG 主办的行业峰会上。IDG 创始董事长熊晓鸽，刚刚盘点完 IDG 深耕中国企业服务多年的成果，台下，GE 中国公司 CEO 便发出了不合时宜的灵魂一问：「中国有很多伟大的公司，也有很多超级大的国企，但是为什么就是没有软件服务的 to B 巨头？热闹的会场，顿时一片沉默。那时，将原因归咎于「投资人不给力」的熊晓鸽大概也不会意识到，他反思自谦的 2016 年，已经是国产 SaaS 行业在一级市场最热闹的日子。

2024-07-22 15:11:47 844

原创 LLM大模型技术实战5：一文总结Prompt提示工程策略与技巧_llm prompt

由于 GPT 模型具有固定的上下文长度,它们无法在单个查询中概括比上下文长度减去生成摘要长度还要长的文本。要摘要像书籍这样的非常长文档,我们可以使用一系列查询逐部分摘要文档。部分摘要可以连接在一起生成摘要的摘要。该过程可以递归进行,直到整个文档被摘要。如果为了理解后面部分需要使用前面部分的信息,则可以在摘要某点内容时,将该点之前文本的运行摘要也包括在内,这一技巧也很有用。OpenAI 之前的研究已经研究了使用 GPT-3 变体递归摘要书籍的效果。

2024-07-22 15:10:51 655

原创多模态大模型入门指南（非常详细）零基础入门到精通，收藏这一篇就够了

如表1所示，对26 SOTA MM-LLMs的架构和训练数据集规模进行了全面比较。随后，简要介绍这些模型的核心贡献并总结了它们的发展趋势。代表了一系列视觉语言 (VL) 模型，旨在处理交错的视觉数据和文本，生成自由格式的文本作为输出。(2)BLIP-2引入了一个资源效率更高的框架，包括用于弥补模态差距的轻量级 Q-Former ，实现对冻结 LLMs 的充分利用。利用 LLMs，BLIP-2 可以使用自然语言提示进行零样本图像到文本的生成。(3)LLaVA。

2024-07-18 10:43:58 998

原创大模型到底能干啥，不能干啥？_大模型不能做到什么

举例：高精确度：中国的首都是哪里？北京。低精确度：请一句话赞美上海。上海，这座璀璨的东方之珠，以其独特的魅力、繁荣的经济和深厚的文化底蕴，展现了无与伦比的现代都市风采。特点：高精确度的结果一般是有正确参考答案的，像人的理性思考。低精确度的结果，一般没有正确回答，怎么回答都可以，像人的感性思考。

2024-07-18 10:43:11 893

原创如何系统的入门大模型？

随着人工智能技术的飞速发展，大模型，尤其是在自然语言处理（NLP）领域的变革性影响，已经引起了广泛的关注。本文将详细介绍如何系统地入门和学习大模型，帮助初学者有效地掌握这一前沿技术。通过遵循以上步骤，你可以系统地入门和掌握大模型。此外，保持好奇心和持续学习的态度对于在AI领域取得成功至关重要。

2024-07-18 10:42:21 365

原创企业大模型微调项目落地实施中有哪些关键岗位角色？_在业务推进中实际的去熟悉大模型的微调涉及到的

随着人工智能技术的快速发展，大型企业纷纷投入到大型模型（如大语言模型、多模态大模型等）的研发与应用中。大模型因其强大的理解和生成能力，在各个领域都有着广泛的应用前景。然而，要将大模型真正应用于实际场景，为企业带来价值，就需要进行微调项目，这是一个涉及技术研发、数据处理、模型训练与优化等多个环节的复杂过程。企业在实施大模型微调项目时，往往面临着一系列挑战，如技术选型、团队组建、职责分工不明确等问题。

2024-07-16 10:45:28 306

原创怎么成为大模型开发工程师？

利用工作之余的空闲时间，努力学习大模型知识吧。目前，这个行业对专业人才的需求量大，无论是大型企业还是中小型企业，都在迅速推进大模型应用的落地。但是，OpenAI 前段时间发布了重磅更新，使普通人和 AI 大模型交互的门槛进一步降低。GPT-4o 的发布可能会进一步拓展具备情绪表达的应用场景，并利用 AI 的千人千面能力真正实现个性化体验。紧接着在 Google I/O 大会，AI 被提及了 121 次。Google 宣称，在 Gemini 的支持下，Google 搜索将被彻底重塑。

2024-07-16 10:44:53 376

原创国内 AI大模型产业发展深度分析 2024

文心一言是百度研发的人工智能大语言模型产品，具备跨模态、跨语言的深度语义理解与生成能力，在文学创作、文案创作、搜索问答、多模态生成、数理逻辑推算等众多领域都能为用户提供高质量服务。文心一言拥有四大基础能力：理解能力、生成能力、逻辑能力、记忆能力。（2）大模型优势：2023 年 10 月发布的“文心大模型 4.0”，相比上一代文心大模型，四大能力显著升级，其中逻辑提升幅度是理解的 3 倍，记忆提升幅度是理解的 2 倍。

2024-07-16 10:44:01 852

原创大模型时代程序员应有的正确姿势，90%的人都走了不少弯路

以前，处理语言，比如分词，开始挺复杂，后来慢慢优化，也不需要很高深的数学。模型大，训练花计算，但有办法减小，比如T5，用一种方法，让模型小点，但也挺好用。既然要系统的学习大模型，那么学习路线是必不可少的，下面的这份路线能帮助你快速梳理知识，形成自己的体系。模型强，训练花计算，有办法减小，模型能干多任务，还能学知识，模拟人，研究得注意道德。作为普通人，入局大模型时代需要持续学习和实践，不断提高自己的技能和认知水平，同时也需要有责任感和伦理意识，为人工智能的健康发展贡献力量。如何设计合适的测试、验证任务？

2024-07-16 10:43:06 732

原创【大模型微调】一文掌握7种大模型微调的方法_大模型如何微调

本篇文章深入分析了大型模型微调的基本理念和多样化技术，细致介绍了LoRA、适配器调整(Adapter Tuning)、前缀调整(Prefix Tuning)等多个微调方法。详细讨论了每一种策略的基本原则、主要优点以及适宜应用场景，使得读者可以依据特定的应用要求和计算资源限制，挑选最适合的微调方案。大型语言模型(LLM)的训练过程通常分为两大阶段：阶段一：预训练阶段在这个阶段，大型模型会在大规模的无标签数据集上接受训练，目标是使模型掌握语言的统计特征和基础知识。

2024-07-11 10:51:35 479

原创一文详解大语言模型的流行架构与训练技术

这篇博客全面介绍了大型语言模型（LLMs）的构建流程，从流行架构的选择到实际建模的每个关键步骤。文章首先探讨了LLMs的模型架构，然后详细阐述了数据准备过程，包括数据的收集、清洗和去重，接着是关于如何进行有效标记化的讨论。在模型构建方面，博客详细解释了采用自监督学习方法的预训练过程，以及对模型进行指令微调和对齐的重要性。每个环节都被细致地讲解，使读者能够深入理解LLMs的构建和优化过程。这篇博客为那些对LLMs工作方式感兴趣的读者提供了一个指导。

2024-07-11 10:51:04 693

原创医疗多模态大模型是什么？医学多模态模型总结：算法其实很简单，拼的就是硬件算力的问题！多模态大模型（医疗影像分析）_医学多模态大模型

概念医学多模态大模型是指利用多种不同的医学数据源和模型，通过深度学习和人工智能技术，构建一个综合性的大型模型，以实现更加准确和全面的医学数据分析和预测。这种模型可以同时处理多种医学数据类型，如医学图像、病历文本、基因测序数据等，从而更全面地揭示医学数据的内在规律和关联。通过对不同数据源的特征提取和分析，医学多模态大模型可以实现更准确的疾病诊断、治疗方案推荐、预后预测等任务。例如，在疾病诊断方面，医学多模态大模型可以同时分析医学图像和病历数据，通过深度学习和特征提取技术，自动识别和分类疾病类型，提高诊断

2024-07-11 10:50:28 782

原创制造业是AI大模型应用的主战场_大模型,制造业

数字原生企业的涌现是产业升级和经济繁荣的重要标志。德国、日本与美国制造业差距的扩大，在微观上主要表现为制造业领域缺乏一批有竞争力的数字原生企业。德国“工业4.0”目标并没有实现，与预期差距较大，中小企业数字化进展缓慢，研究表明只有21%的中小企业在生产中使用了数字技术，也没有成长出一批数字时代有竞争力的中小企业。日本的情况与德国类似，日本经历了“失去的二十年”，同样没有培养出一批数字原生企业。

2024-07-09 15:15:04 691

原创利用这些“大模型部署工具”轻松部署属于你自己的AIGC大模型吧！

该工具由Fitten与清华大学联合开发，当前支持4个语言大模型，具体包括：ChatGLM、盘古、ChatRWKV、LLaMA。该工具链支持多种硬件设备，除了支持主流的NVIDIA、AMD、Ascend硬件外，还支持天数智芯、中科海光和摩尔线程的硬件设备！该工具链主要通过动态swap机制和Transformer加速库来加速语言大模型部署。

2024-07-09 15:14:13 758

原创企业该如何巧妙落地大模型这里有10大指南_大模型落地需采用什么策略

挑战与机会并存，挑战越大，机会越大，收益也就越大。作为数智时代的经营者，千万不要顽固不化，更不要畏首畏尾，因噎废食，而要积极拥抱变化，快速重塑认知，持续优化思路，带着你的团队，采用“

2024-07-09 15:13:34 938

原创 AI大模型知识点大梳理_ai模型分类

我意识到有很多经验和知识值得分享给大家，也可以通过我们的能力和经验解答大家在人工智能学习中的很多困惑，故此将并将重要的AI大模型资料包括AI大模型入门学习思维导图、精品AI大模型学习书籍手册、视频教程、实战学习等录播视频免费分享出来。AI大模型可能会改变社会结构，导致某些职业的消失或新兴职业的出现。该阶段让大家对大模型 AI有一个最前沿的认识，对大模型 AI 的理解超过 95% 的人，可以在相关讨论时发表高级、不跟风、又接地气的见解，别人只会和 AI 聊天，而你能调教 AI，并能用代码将大模型和业务衔接。

2024-07-05 14:30:54 1329

空空如也

空空如也