- 博客(898)
- 收藏
- 关注
RSS订阅原创 20.6K+ Star！一个开源的LLM（大型语言模型）应用开发平台
Dify是一个开源的LLM（大型语言模型）应用开发平台，它通过直观的界面结合了AI工作流程、RAG（检索-分析-生成）管道、代理功能、模型管理、可观察性特性等，使用户能够快速从原型设计转向产品生产。
2024-08-09 19:36:00
1026
原创 大模型的几个关键认识——成本、网络效应、用户、竞争、基准、产品
随着大模型从技术竞赛阶段逐渐过渡到应用普及阶段，对于供给侧而言，抢占用户和规模化推广成为未来在大模型市场中占据一席之地的必经之路。而对于需求侧来说，在各家基础大模型能力和体验差异不大的前提下，投入产出比与大模型推广息息相关。在这一背景下，在GPT-4o的发布会后，国内基础大模型厂商纷纷开始降价，第一轮价格战拉开帷幕。这种现象类似于云计算领域的竞争，亚马逊云自诞生以来已降价超过100次，不断降低用户使用云计算的成本，这也是云计算渗透率不断提升的关键。
2024-08-07 17:58:46
1188
原创 2024国内超火的 8 款 AI 大模型，你用过哪几个？
大家好，最近好多朋友在问我，国内是否有好用的大模型，今天我就整理好 8 款大模型，大家可以多尝试，一定会有不一样的感觉。01HOTSPOTKimiKimi 是由月之暗面科技有限公司开发的人工智能助手。它擅长中英文对话，能够提供安全、有帮助、准确的回答。同时能够阅读和理解用户上传的文件，访问互联网，并且结合搜索结果来回答问题。也能够处理多种文件格式，包括但不限于TXT、PDF、Word文档、PPT幻灯片和Excel电子表格。02HOTSPOT智普清言。
2024-08-07 17:34:50
6732
原创 大语言模型作为功能近似器
论文探讨了将大语言模型视为功能近似器的概念，提出了一个分析框架来评估这些模型在不同任务上的表现，强调了其通用性以及在交互式应用中的功能诱导过程，并讨论了这一视角下模型评估的相关问题。
2024-08-06 11:31:09
876
原创 本地部署大模型！一篇教会你，奶奶看了都会的教程！
综上所述，通过huggingface或者modelscope快速了解最新的大模型，并通过公式计算硬件要求，最后可通过ollama快速部署大模型。
2024-08-06 10:00:41
2128
原创 书单 | 6本AI领域名家名作，大模型时代，趁风而起！
大模型时代，想抓住风口吗？本期书单就来分享，给大家把大模型时代那些事儿讲清楚！放心，入门的同学也可以从最基础的学起~~快来看看有哪些书吧……▊《彭勇，彭旋，郑志军，茹炳晟 著读懂ChatGPT的核心技术、GPT的进化史和创新点详述多模态大模型的核心技术和应用场景让中小公司可以从0到1部署多模态大模型，打开通往通用人工智能的大门本书详细介绍了大语言模型和多模态大模型的发展历史、技术原理和亮点、主要的开源框架、配套工具、部署细则和实战案例。
2024-08-05 10:27:12
1522
原创 深度讲解AI大模型原理，它到底是如何工作的
假如我们有一个AI大模型，比如GPT2。此时我们向模型输入，“[cls]、今、天、天、气、真”，一共6个字(单词)。我们希望模型基于这6个字，生成第7个字。此时，模型会输出第7个字，是“的”字。这里要需要特殊说明：最开始的[cls]，是一个特殊标记；它用于标记句子的起始位置；模型需要基于一些特殊的标记来进行计算。现在不太理解也没关系，可以暂时忽略这个cls标记。接着，我们要生成第8个字。对于第8个字的生成，就会依赖初始输入的6个字，与刚刚生成的第7个“的”字。
2024-08-02 10:30:56
2115
原创 字节内部热捧“7种大模型微调的方法笔记”，太完整了
当然还有很多没有开源的，比如 OpenAI 的 ChatGPT/GPT-4，百度的文心一言，谷歌的 PLAM-540B，华为的盘古大模型，阿里的通义千问，等等。与传统的微调范式不同，前缀调整提出了一种新的策略，即在预训练的语言模型(LM)输入序列前添加可训练、任务特定的前缀，从而实现针对不同任务的微调。这些大公司或者研究机构，都是有足够资源的来开发大模型，但是对于一般的小公司或者个人来说，要想开发自己的大模型几乎不可能，要知道像 ChatGPT 这样的大模型，一次训练的成本就在上千亿美元。
2024-08-01 11:08:58
691
原创 当下大模型的趋势以及如何让学习大模型？
作为一名热心肠的互联网老兵，我意识到有很多经验和知识值得分享给大家，也可以通过我们的能力和经验解答大家在人工智能学习中的很多困惑，所以在工作繁忙的情况下还是坚持各种整理和分享。模型压缩和优化：随着模型规模的增大，模型的存储和计算成本也相应增加。：大模型的研究和开发越来越多地依赖于开源社区的合作，如GitHub上的开源项目、研究论文的开放获取等，这加速了技术的进步和知识的共享。：随着模型能力的增强，如何确保AI系统的行为与人类的意图和价值观相一致，以及如何防范潜在的安全风险，成为重要的研究方向。
2024-07-30 14:23:25
425
原创 小白也能微调大模型：LLaMA-Factory使用心得
1. 准备好硬件（GPU）、数据；通过各方面的资讯选中你想要微调的基座模型2. 准备好代码：输入数据 + 模型 -> 在GPU上反复训练3. 训练结束以后，得到训练过程中的checkpoint + 一些log信息4. 根据log信息选一些比较有希望的checkpoint在自己的测试集上推理，获得相应的结果5. 分析结果，获得下一轮实验（数据、训练方案的迭代）思路而LLaMA-Factory就是一个很好的负责step。
2024-07-30 13:59:06
1100
原创 直观易用的大模型开发框架LangChain，你会了没？
调用Embedding、Completion、Chat Model总结 目前LangChain框架在集团大模型接入手册中的学习案例有限，为了让大家可以快速系统地了解LangChain大模型框架并开发，产出此文章。本文章包含了LangChain的简介、基本组件和可跑的代码案例（包含Embedding、Completion、Chat三种功能模型声明）。
2024-07-29 12:00:11
671
原创 【超丝滑的LangChain教程】快速入门Conversation Retrieval Chain
我们将从一个简单的 LLM 链开始，它只依赖于提示模板中的信息来响应。接下来，我们将构建一个检索链，该链从单独的数据库获取数据并将其传递到提示模板中。整个的流程大概是：检索文档找到关联的文档（一条或者多条），基于文档和历史对话进行问答，得到问题的答案。现在我们有了这个新的检索器，我们可以创建一个新的链来继续对话，并牢记这些检索到的文档。最后，我们将构建一个代理，利用 LLM 来确定它是否需要获取数据来回答问题。主要是网页数据的加载、嵌入模型的初始化、向量数据库的初始化等，具体代码如下。
2024-07-29 11:15:55
206
原创 开发RAG应用，你必须知道的7个Embedding模型
在自然语言处理（NLP）领域，Embedding模型是将文本数据转化为数值向量的核心技术，从而让计算机能够便捷地衡量文本间的语义关联，这种表示法已成为多种基础NLP任务的核心，如文本相似度判定、语义搜索、信息检索、文本重新排序、聚类以及作为下游任务的特征输入。
2024-07-27 13:45:39
2009
原创 程序员转行大模型，真的是新时代的选择吗？
在2024年，程序员仍然是IT行业中备受追捧的职业。但随着技术的不断发展，就业市场对于程序员的技能要求也在不断变化。传统的编程技能虽然重要，但面对日新月异的人工智能技术，许多程序员开始思考如何转型，以适应市场的变化。许多程序员选择转行当下火热的大模型，这真的是新时代的正确选择么？答案是值得肯定的。
2024-07-27 10:26:38
422
原创 大模型：2024开源项目汇总
当大模型成本逐渐降低，可靠性提升后，这意味着越来越多的业务应用将会与 LLM 结合，为了让这种结合更加顺畅，需要有与现有来支撑 LLM 应用开发的快速开发应用构建工具: 插件中心, 流程编排, Prompt工程, RAG, Agent模型开发工具: 训练数据管理, 模型调优, 模型评测, 模型部署对比说明可参考：**2.1 Dify：**开源的 LLM 应用开发平台。其直观的界面结合了 AI 工作流、RAG 、Agent、模型管理、可观测性功能等，让您可以快速从原型到生产。
2024-07-26 11:32:53
2375
原创 一文入门最热的LLM应用开发框架LangChain
假如我们想要用 openai api 对一个段文本进行总结，我们通常的做法就是直接发给 api 让他总结。但是如果文本超过了 api 最大的 token 限制就会报错。这时，我们一般会进行对文章进行分段，比如通过 tiktoken 计算并分割，然后将各段发送给 api 进行总结，最后将各段的总结再进行一个全部的总结。LangChain 很好的帮我们处理了这个过程，使得我们编写代码变的非常简单。# 导入os,设置环境变量。导入文本加载器、总结链、文本分割器及OpenAI模型import os。
2024-07-26 10:38:54
847
原创 浅谈生成式 AI 的发展方向
生成式AI的未来发展方向是一个复杂而多元的话题，涵盖了技术、伦理和实用性的各个层面。目前看来，对话系统（Chat）与自主代理（Agent）都是发展的重要方向，并且二者的发展并非彼此独立，而是相辅相成。生成式AI在对话系统和自主代理两个领域已取得显著进展，不仅推动了人工智能的边界，也改变了多个行业的运作方式。下面详细介绍这两个领域的发展现状、主要技术和应用场景。
2024-07-25 11:18:01
1063
原创 一篇解读大语言模型-Transformer，小白轻松入门！
大语言模型-Transformer是一种基于自注意力机制（self-attention）的深度学习模型，在处理序列数据（如自然语言）时展现出卓越的性能。Transformer模型由Vaswani等人在2017年提出，旨在解决传统的循环神经网络（RNN）和长短时记忆网络（LSTM）在处理长距离依赖问题时存在的困难。Transformer的核心组件：1. 注意力机制（Attention Mechanism）：通过为输入序列中的每个元素分配权重，模型可以更好地捕捉到重要信息。
2024-07-25 11:10:38
1322
原创 上海交通大学推出 更适合企业落地大模型的《动手学大模型》LLM 实战课，课件+实战教程（分享）
来了来了！上海交通大学的大模型超超超级牛掰的大模型编程实战课公开了，课件+教程,本套实战教程旨在提供大模型相关的入门编程参考。通过简单实践，帮助同学快速入门大模型，更好地开展课程设计或学术研究。上海交大大模型实验室整了一份针对入门阶段的大模型教程，已经看完了非常不错，想要学大模型的程序员，产品经理都推荐~
2024-07-24 13:43:57
1792
原创 LLM 教程 —— 利用大语言模型进行文本创作
大型语言模型是一种基于大量文本数据（如书籍、文章、新闻、博客和社交媒体帖子等）训练的人工神经网络。这种模型能够学习自然语言的语法、语法、词汇及语义等结构和模式，并掌握文本中的日期、名称、地点、事件和概念等知识和事实。大型语言模型由多层神经元组成，这些神经元负责处理输入文本并生成输出文本。输入可以是一个词、一个短语、一句话或一段文字，而输出则可能是下一个词、下一句话或整篇文章。此外，输出还可以基于某些上下文条件生成，如特定的主题、文体、风格或情感。
2024-07-24 10:07:32
1582
原创 一文讲明白初学者怎么入门大语言模型（LLM）？
关于如何入门LLM，大多数回答都提到了调用API、训练微调和应用。但是大模型更新迭代太快，这个月发布的大模型打榜成功，仅仅过了一个月就被其他模型超越。训练微调也已经不是难事，有大量开源的微调框架（llamafactory、firefly等），你只要懂部署，配置几个参数就能启动训练。甚至现在有大量云上项目，你根本不需要部署，直接上传数据，就能启动。这我让想起来之前的算法工程师都被调侃成调参师，新出一个大模型，下载下来跑一遍，运行一遍，对于自己理解和入门大模型没有任何意义。
2024-07-23 10:44:32
921
原创 大模型赋能行业发展
10月18日，在“出版、发行与大模型应用高端论坛”上，北京师范大学新闻传播学院媒介融合与数字出版中心主任、国家新闻出版署出版业科技与标准重点实验室出版业用户行为大数据分析与应用重点实验室主任秦艳华发布了《出版业人工智能大语言模型应用研究报告》。《报告》以人工智能大语言模型应用于出版业的实践为基础，以此展开对国内外的应用现状、呈现问题、解决对策及发展趋势4个方面的分析，以期为我国出版业的发展提供助力。《报告》指出，ChatGPT大语言模型2022年问世后，推动了大语言模型的发展。
2024-07-23 10:36:36
885
原创 一文带你了解火遍全网的“AI大模型”
AI 是个很宽泛的东西，我们通常的理解，它包括机器学习，自然语言处理，视觉识别，涉及的学科如计算机科学，数学，认知学，心理学，社会学，哲学等，我们可以把一切关于计算模拟人脑思维或功能的模拟均可以认为是AI。这里讨论的只是AI中的某些领域，或许通过这一领域的学习，以点带面的去了解AI的全貌，或许是个比较切合实际的做法，从以下几个路径中，可以简单的学习到AI。**文心一言：**百度的大语言模型，在多模态、安全、文本风格迁移等细类评估中表现出色，体现出强大的基础模型能力。
2024-07-22 16:15:59
794
原创 争光了！中国AI大模型全球排名第一
目前中国的AI实力还是可以的，只是很多人不认可，而这次的排行榜阿里用实力告诉大伙，中国AI技术并不比国外的差，甚至还遥遥领先。现在AI开源大模型阿里已经的排名第一了，虽然OpenAI不让你用，但相信在不久的将来，会有越来越的人使用阿里的通义千问Qwen2-72B。希望阿里也能顶住压力，砥砺前行，更上一层楼吧。
2024-07-22 16:11:37
714
原创 这就是AI么？我给AI的和AI给我的~AI首饰穿戴
感兴趣的小伙伴，赠送全套AIGC学习资料，包含AI绘画、AI人工智能等前沿科技教程和软件工具，具体看这里。AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。
2024-07-19 10:39:20
1277
原创 景观的LORA真没啥好用的？我找了10个景观LORA模型，快来看看吧
感兴趣的小伙伴，赠送全套AIGC学习资料，包含AI绘画、AI人工智能等前沿科技教程和软件工具，具体看这里。AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。
2024-07-18 15:30:00
652
原创 【LLM大模型】《开源大模型食用指南》全网发布，轻松助你速通llm大模型！
在实现主流 LLM 的相关部分之后，我们希望充分聚集共创者，一起丰富这个开源 LLM 的世界，打造更多、更全面特色 LLM 的教程。大模型（LLM）狭义上指基于深度学习算法进行训练的自然语言处理（NLP）模型，主要应用于自然语言理解和生成等领域，广义上还包括机器视觉（CV）大模型、多模态大模型和科学计算大模型等。，针对各类开源大模型提供包括环境配置、本地部署、高效微调等技能在内的全流程指导，简化开源大模型的部署、使用和应用流程，是一个围绕开源大模型、针对国内初学者、基于 AutoDL 平台的。
2024-07-18 15:13:51
890
原创 LLM面对复杂业务如何划分和组织任务
文章讨论了在LLM（大型语言模型）时代，如何将抽象的知识概念具体化到实际业务中，以使模型能够更好地服务于业务。文章提出了两个关键过程：概念对齐和知识激活。
2024-07-18 15:10:49
743
原创 详解大型语言模型的基石: 词嵌入（Word Embedding）以及各种词嵌入方法的优劣
词嵌入是大型语言模型的关键构建块。对于不熟悉的人来说，大型语言模型 (LLM) 由几个关键构建块组成，使它们能够高效地处理和理解自然语言数据。大型语言模型 (LLM) 是一种人工智能模型，它基于大量文本数据集进行训练。该数据集可以是任何内容，从书籍和文章到网站和社交媒体帖子。LLM 学习数据集中单词、短语和句子之间的统计关系，从而使其能够生成与其训练文本相似的文本。LLM 通常使用 Transformer 架构构建。Transformer 是一种非常适合自然语言处理任务的神经网络。
2024-07-18 15:08:33
1259
原创 langchain运行本地llm
LangChain是一个专为开发者设计的开源编程框架，旨在帮助他们利用大型语言模型（LLMs）打造各种应用。无论是聊天机器人、生成式问答系统， 还是内容摘要工具，LangChain 都能通过灵活串联多个模块的组件，使开发者能够充分发挥 LLM 的强大能力，打造出卓越的应用程序。解释下langchain中各模块作用前面文章讲了如何通过ollama运行llama3:8b和qwen2:7b飞行模式下本机运行结果。
2024-07-18 14:28:36
333
原创 小白必看！这些好用的涂鸦LORA模型，你不会还不知道吧！
感兴趣的小伙伴，赠送全套AIGC学习资料，包含AI绘画、AI人工智能等前沿科技教程和软件工具，具体看这里。AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。
2024-07-18 09:45:00
1570
原创 SD大模型和罗拉模型的区别？
感兴趣的小伙伴，赠送全套AIGC学习资料，包含AI绘画、AI人工智能等前沿科技教程和软件工具，具体看这里。AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。
2024-07-17 11:19:55
414
原创 最适合新手宝宝的ComfyUI安装教程！
由于电子羊目前在维护不让注册新用户，我感觉之后如果做ComfyUI教程的话，还是得需要本地的，所以我就本地安装了，大家不要慌，跟着我的图文笔记，你也能安装明白。首先就是跟着秋叶大佬安装，我也是跟着大佬的步骤来的，但是后面的大模型和罗拉模型，我就没有用SD的路径了，直接重新安装的。其次是下载大模型和罗拉模型（可以不下载我的，自己想要什么模型去哩布哩布下载也是可以的，因为我这里模型比较多，非常大）好了，如果是安装小白，然后用的是百度网盘，那就看我下面的安装笔记吧。好了，到这一步，基础的安装就结束了。
2024-07-17 11:18:59
1039
原创 也许当下AI视频的意义，是用来帮忙弥补遗憾的吧
感兴趣的小伙伴，赠送全套AIGC学习资料，包含AI绘画、AI人工智能等前沿科技教程和软件工具，具体看这里。AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。
2024-07-15 15:03:53
920
原创 AI绘画何以突飞猛进? 从历史到技术突破, 一文读懂火爆的AI绘画发展史
自从前段时间偶然间被当下AI绘画的水平震住之后（超越一切的AI作画神器，和它创作的234个盔甲美女未来战士） ，作者深感当今AI绘画的飞速进展或许已远超所有人的预期。而这里的前因后果，包括AI绘画的历史，以及最近的突破性进展，值得好好和大伙儿梳理和分享一下。因此有了本文。2022，进击的AI绘画AI绘画的历史AI绘画何以突飞猛进顶级AI绘画模型的PKAI绘画的突破对人类意味着什么感兴趣的小伙伴，赠送全套AIGC学习资料，包含AI绘画、AI人工智能等前沿科技教程和软件工具，具体看这里。
2024-07-13 15:17:15
1595
原创 【大模型书籍】从零开始大模型开发与微调：基于PyTorch与ChatGLM_
今天又来给大家推荐一本大模型方面的书籍<本书使用PyTorch 2.0作为学习大模型的基本框架，以ChatGLM为例详细讲解大模型的基本理论、算法、程序实现、应用实战以及微调技术，为读者揭示大模型开发技术。本书配套示例源代码、PPT课件。完整版本获取😝有需要的小伙伴，可以V扫描下方二维码免费领取==🆓。
2024-07-12 17:54:44
258
原创 大模型为什么是深度学习的未来？
随着深度学习技术的发展，大模型已经成为深度学习的未来。大模型是一种深度学习模型，它可以处理大量的数据，从而获得准确的预测结果。首先，大模型可以有效地处理大量数据。传统的机器学习模型只能处理少量的数据，而大模型可以处理大量的数据，从而获得更准确的预测结果。此外，大模型可以有效地处理非结构化的数据，例如图像和视频。其次，大模型可以提高模型的准确性。大模型可以捕捉数据之间的复杂关系，从而提高模型的准确性。此外，大模型可以更快地训练，从而更快地获得准确的预测结果。最后，大模型可以更好地支持深度学习。
2024-07-12 17:36:53
955
原创 Stable Diffusion 4.8.7升级版更新，Ai绘画风口已来！（无需部署，解压即用）
2024可以称得上是Ai技术大爆发的元年，目前两款Ai神器大火，一款是大名鼎鼎的Chat GPT。另外一款大火的是本期社长介绍的Ai绘图软件—。5月**Stable Diffusion Ai绘画最新版本更新啦！此次从4.7更新至4.8.7版本！**主要是更新优化和大模型增加，无需复杂的部署，解压即用。Stable Diffusion能做什么▼用Stable Diffusion你可以轻易生成很多种风格的小姐姐，无任何版权困扰。
2024-07-12 11:33:05
417
原创 Stable Diffusion又出大招！「文生动画」震撼发布淘汰导演，DC英雄一秒变身
Stability AI又放大招！现在，Stable Diffusion也能生成视频了。AI届，实在是太卷了。昨天，Stability AI发布了一款专为艺术家和开发人员设计的工具——Stable Animation SDK。用户可以通过多种方式创建令人惊叹的动画效果。此前，Runway的Gen-2就相当炸裂，宣传词非常霸气——「say it，see it」。现在，Stability AI也有比肩Gen-2的视频生成工具了！Stable Diffusion能做视频了。
2024-07-12 11:11:47
879
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人