自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(320)
  • 资源 (30)
  • 收藏
  • 关注

原创 LangChain 1.0 智能体开发(三):Agent 记忆管理——从短期对话到跨会话长期记忆

本文深入解析LangChain 1.0中Agent记忆机制,澄清“内存=短期、数据库=长期”的常见误解。核心观点:短期记忆绑定thread_id(会话),长期记忆绑定user_id(用户),分界线在于生命周期归属而非存储介质。短期记忆由Checkpointer管理,通过thread_id实现会话内上下文延续;长期记忆基于BaseStore或向量库,支持跨会话偏好与知识积累。文章详解InMemorySaver与PostgresSaver的适用场景,并强调生产环境应结合持久化检查点与结构化长期记忆,构建可信赖、

2026-09-18 18:15:00 661

原创 LangChain 1.0 智能体开发(二):工具(Tools)的集成与调用

本文深入解析 Agent 工具设计的核心:工具是模型与真实世界交互的唯一接口,其 name、description 与 args_schema 构成模型决策依据,本质即提示词工程。文章系统讲解环境配置、模型加载(支持 OpenAI 兼容多厂商)、三种工具定义方式(@tool、StructuredTool 等)的 API 细节,并强调良好文档对工具调用准确性的关键作用,涵盖 MCP 协议接入、多工具调用实践与常见陷阱,为构建高效可控的 Agent 提供完整工程指南。

2026-09-18 18:00:00 335

原创 LangChain 1.0 入门八讲汇总:从“能调用“到“能上生产“的完整路基

本文对《LangChain 1.0 入门》系列八讲进行系统梳理,按“接口层、接入层、运行层、语义层”四层架构重构知识体系。强调Runnable为统一接口基石,模型接入依赖标准化配置,稳定性由重试与限速保障,而消息、提示词与结构化输出共同支撑业务语义。提出分阶段学习路径与复习策略,帮助开发者从零搭建可上线的生产级应用,突破“学完不会用”的瓶颈。

2026-09-16 14:53:14 280

原创 LangChain 1.0 智能体开发(一):Agent 核心概念与技术架构

Agent以大语言模型为决策核心,通过循环调用工具实现多步任务自主执行。其本质是“模型+提示工程框架”(Harness),将任务分解、工具选择与路径调整交由模型在运行时动态决定。核心架构包含感知、认知中枢、记忆、工具与执行五大模块,形成“思考—行动—观察”的闭环。关键在于工具描述的精准性与上下文构造的有效性,而非模型本身。LangChain的create_agent提供了可配置的工程化实现,使复杂任务自动化成为可能。

2026-09-14 17:33:58 145

原创 LangChain 1.0 入门(八):结构化输出全解|全解析器实战+生产最佳实践

LangChain 1.0重构结构化输出,以with_structured_output统一API,支持Tool与Provider双策略,联动Pydantic强校验,实现字段约束、非法数据自动修正及嵌套复杂结构解析,适配多模型与生产环境。

2026-09-07 16:21:51 394

原创 LangChain 1.0 入门(七):批处理、并发控制与流式传输

LangChain 1.0 重构底层 Runnable 原语,统一调用规范,提供 batch、abatch、stream、astream 等五种核心调用形态。本文详解批量、异步并发、流式、事件监听全套 API,涵盖参数配置、踩坑点及生产级代码,助力开发者规避限流、显存溢出、任务卡死和链路

2026-09-07 14:29:51 345

原创 LangChain 1.0 入门(六):标准化内容块 Content Blocks——彻底解决多模型、多模态适配痛点(全代码实战版)

在 LangChain 0\.x 版本的工程落地中,开发者普遍面临一个棘手问题:**大模型厂商适配成本极高**。不同厂商的文本输出、思维链结构、多模态数据解析规则完全割裂,切换 OpenAI、DeepSeek 等模型时,必须重构解析代码、适配差异化接口格式,不仅代码冗余严重,还极大限制了多模态 RAG、智能 Agent 等业务的通用性

2026-08-30 16:46:42 352

原创 LangChain 1.0 入门(五):提示词工程、partial变量、ChatPromptTemplate、Hub模板库

提示词工程(Prompt Engineering)是大模型应用开发的核心环节,手写字符串拼接提示词难以维护、无法迭代调优。LangChain‑Core 的 Prompt 模板体系,就是把提示词工程**代码化、工程化**。本文先讲解提示词工程基础方法论,再结合 RAG知识库问答、代码助手、企业客服、Agent 系统指令真实业务场景,讲解API、核心参数、partial半成品模板、对话模板、LangSmith Hub模板仓库、生产踩坑与最佳实践,附带完整可运行Python示例。

2026-08-25 14:56:03 377

原创 LangChain 1.0 入门(四): Messages 深度解析——大模型对话上下文核心单元

当我们调用大模型对话接口时,模型并不能自动记忆聊天历史。每一次调用 LLM 都是一次独立无状态请求。Messages 是 LangChain 1.0 中构建对话、Agent、RAG 应用的基石。很多开发者写多轮对话记不住上下文、多模态调用异常、工具调用报错,根源大多是对消息对象理解不到位。本文结合 LangChain 官方文档,从底层概念、消息类型、三种调用方式、多模态 Content‑Blocks、序列化持久化、实战案例以及踩坑点完整讲解 Messages。

2026-08-24 16:49:21 358

原创 LangChain 1.0 入门(三):稳定性双核心——重试机制+速率限速器参数详解与实战

LangChain大模型API调用稳定性解决方案 本文介绍了LangChain 1.0中两大核心稳定性工具:.with_retry()自动重试机制和InMemoryRateLimiter速率限速器的组合使用方案。这两种机制分别解决大模型API调用中的不同问题: 速率限速器:作为事前防护,通过限制每秒请求数量,主动匹配服务商的QPS限制,避免触发429限流报错和服务器拥堵。 重试机制:作为事后兜底,采用指数退避+随机抖动策略,智能处理网络抖动、临时超时等瞬时故障,避免暴力重试加剧拥堵。

2026-08-23 20:40:57 476

原创 LangChain 1.0 入门(二):LangChain 全模型标准化接入最佳实践(小白参数详解版)

本文是一篇详细指导如何在LangChain中调用不同大模型的教程,主要面向新手开发者。文章首先区分了LangChain中的两类模型:LLM文本模型和ChatModel对话模型,并指出其关键区别在于是否需要使用.content获取输出。 文中提供了多种主流模型的原生调用方法,包括DeepSeek、通义千问、OpenAI、Ollama本地模型和vLLM本地推理服务,对每个模型的关键参数进行了详细解释。特别强调了不同模型在参数设置上的区别和常见错误点。 为了解决原生调用方法存在的代码混乱、切换模型麻烦等问题,文章

2026-08-23 19:36:40 522

原创 LangChain 1.0 入门(一):Runnable 统一接口全解析(含完整代码+逐行输出解读)

本文详细解析了LangChain 1.0中Runnable的核心设计思想与实现原理。Runnable作为统一接口,为所有功能组件提供了五种标准执行方式(invoke、batch、stream等)。文章通过真实代码演示和输出分析,对比了ChatPromptTemplate和@tool工具两类基础Runnable的执行行为差异,并深入解析了ChatModel、RunnableLambda等进阶组件的特性。重点总结了各类Runnable的生命周期事件和输出格式,揭示了LCEL管道语法的底层实现机制。最后提供了全类

2026-08-12 16:36:15 53

原创 2026年第29周(7.13-7.19)AI全复盘:技术突破、行业趣闻翻车、算力服务器商业动态

本周AI行业呈现「国内硬件落地爆发、海外舆论翻车频发、算力商业量价齐涨」的鲜明格局。WAIC 2026集中释放国产算力十万卡集群、顶级开源大模型、超节点硬件三大里程碑成果;海外接连爆出隐私泄露、版权翻车、算法歧视争议;AI服务器集采、长单租赁、液冷算力商业化迎来密集落地,产业从「模型参数内卷」正式转向「算力基建+场景落地」双主线。

2026-07-19 15:52:16 747

原创 LangChain 1.0 全新架构深度解析!从生态组件到底层运行原理

LangChain 1.0 全面升级解析:构建生产级大模型应用的新标准 LangChain 1.0 作为大模型应用开发的主流框架,完成了从实验性工具到企业级解决方案的蜕变。本文系统性地拆解了其核心升级亮点和完整生态体系: 关键升级: 采用统一架构(LCEL + LangGraph)取代碎片化Chain体系 标准化Agent开发接口,简化智能体创建流程 原生支持状态持久化和断点续跑 深度集成LangSmith实现全链路可观测性 七大核心层级

2026-07-19 15:11:41 44

原创 2026上半年通用语言理解场景选型推荐

本报告对当前主流AI大模型在纯文本理解场景下的性能进行系统评估,涵盖DeepSeekV4、GLM-5、Qwen3.5等10款模型。DeepSeekV4-Pro以1M上下文、88.7 MMLU得分成为开源天花板;GLM-5在AAIntelligenceIndex获50分,与ClaudeOpus4.5同级;Qwen3.5-397B以91.5 MMLU得分居开源第一。报告建议:追求性能选DeepSeekV4-Pro,成本敏感选MiniMaxM2.5(1美元/小时),需多模态能力选Qwen3.5-397B。

2026-05-14 15:51:14 646

原创 2026年上半年开源AI编程大模型选型指南

2026年主流编程大模型横向评测:DeepSeek V4-Pro以1.6T参数和1M上下文窗口展现全能表现,MiniMax M2.5以80.2% SWE-bench得分和100TPS推理速度成为性价比之王,GLM-5.1以58.4% SWE-benchPro得分创开源纪录,Qwen3-Coder-30B专注代码生成,Kimi-K2擅长思维链推理,MiniMax M2.7强化多智能体协作能力。评测涵盖参数量、量化格式、显存需求等核心指标,为开发者提供专业选型参考。

2026-05-14 15:47:41 1236

原创 从Prompt到Harness:AI Agent三代工程化全解析

本文系统解析了AIAgent工程化的三代技术演进。第一代Prompt Engineering通过优化提示词解决基础交互问题;第二代Context Engineering通过上下文管理解决信息边界问题;第三代Harness Engineering构建完整工程框架,实现任务规划、执行评估和安全管控的三层闭环架构。文章详细阐述了三代技术的核心方法、适用场景及相互关系,并分享了全球大厂的成功案例。

2026-05-13 15:15:00 695

原创 Linux系统管理(二十)——Linux root磁盘不足?一站式应急清理方案(亲测可用)

Linux root磁盘不足应急清理方案:当服务器告警磁盘空间100%时,可通过三步快速释放空间。1)应急清理:安全删除yum缓存(yum clean all)、系统日志(rm -rf /var/log/.gz)和临时文件(/tmp/);2)深度清理:移除无用依赖包(yum autoremove)、Python缓存(pip cache purge)和特定大文件;3)长期维护:设置日志大小限制(journalctl --vacuum-size=100M)和定期清理任务。操作时需避免误删核心文件,清理后验证空间

2026-04-17 17:07:19 621

原创 LangChain ShellTool 深度解析:从基础使用到安全增强(限制shell的执行权限)

本文全面解析了LangChain生态中的ShellTool工具,从基础使用到Agent集成再到安全增强。ShellTool作为连接大语言模型与操作系统的桥梁,允许执行shell命令进行系统交互。文章首先介绍基础用法,然后展示如何集成到Agent中处理复杂任务,最后重点讲解安全增强方案,通过白名单、黑名单和目录限制等机制构建SafeShellTool。最佳实践部分强调安全使用建议、适用场景和性能考量。ShellTool为AI应用提供了强大的系统交互能力,但需谨慎使用以确保安全。

2026-03-22 12:24:18 93

原创 全网都在抢的「AI龙虾」大乱斗!4家神仙打架,普通人只能看馋

有Mac+抢到邀请 → 玩腾讯Q-Claw想简单无脑上手 → 冲智谱AutoClaw爱摸鱼想云端养 → 选字节Coze小米17系列+极客身份 → 等小米MiClaw邀请总之,现在的AI龙虾圈就是:大厂内卷、用户抢码、普通人坐等公测~你抢到内测资格了吗?评论区聊聊你最想养哪只龙虾!

2026-03-17 15:53:27 404

原创 AI圈炸了!全民养龙虾、Siri换芯、国产大模型爆发|3.8-3.9热点全梳理

AI从"聊天"走向"行动":智能体Agent成为新入口本地+隐私成标配:企业与个人更看重数据安全国产技术全线提速:大模型、端侧、硬件同步突破机会与风险并存:装机热背后,安全与合规不能少一句话预判:人人拥有专属AI数字员工的时代,真的来了。图 | AI时代总结Part.07 互动与关注。

2026-03-09 19:19:40 505

原创 爆火的“龙虾AI“OpenClaw:从程序员玩具到全网顶流,它的故事藏着AI的未来

2026年开年,科技圈被一只"龙虾"霸屏了。它不是餐桌上的麻辣小龙虾,也不是水族馆里的观赏生物,而是一个名叫OpenClaw的开源AI项目。粉丝们自称"甲壳教徒",喊着"记忆是神圣的"口号,疯狂"养虾";工信部紧急发布安全警告,提醒大家警惕它的潜在风险;它从一个程序员的业余玩具,短短3个月登顶GitHub热榜,经历两次改名风波,却越挫越火。今天,我们就来扒一扒OpenClaw的前世今生,聊聊它背后那些让人啼笑皆非的趣闻,以及牵动全网的热点新闻,读懂这只"龙虾"为何能掀起全球AI狂潮。

2026-03-08 17:06:53 1230

原创 玩转大语言模型——在Windows环境下本地部署openclaw

安装openclaw需要用到linux环境,在windows环境中可以使用WSL实现,WSL的安装过程可以参照以下博客,本文不再赘述。

2026-03-07 19:11:37 159

原创 打破信息差——2月28日AI全景日报

中国AI调用量首超美国,国产模型占据全球调用量TOP5中的四席。

2026-03-01 14:14:42 733

原创 2月26日AI全景日报:国产AI历史性反超、全球算力狂飙,一个时代正式开启

2026年2月26日成为AI发展里程碑:中国AI模型调用量首次超越美国,全球前五模型中国占四席;可灵3.0登顶文生视频榜首,华为云码道上线,国产AI实现全维度突破。英伟达财报创纪录,Meta与AMD签600亿美元芯片订单,全球算力竞赛白热化。AI应用全面爆发,从消费到产业实现规模化落地,同时全球监管收紧,安全伦理成为焦点。这一天标志着中国AI从追赶到领跑、行业从技术竞赛转向应用落地、发展模式从野蛮生长转向规范合规三大历史性转折。

2026-02-27 12:21:59 635

原创 2月25日AI全景日报:国产模型狂飙、全球算力豪赌、安全与监管齐升级

2026年2月25日,不是普通的一天。它是国产AI全球化的里程碑,是全球算力军备赛的宣言书,是AI安全与监管的分水岭。AI不再是概念,而是生意、基础设施、国家竞争力。对于企业与个人,跟上AI、用好AI,就是抓住这个时代的最大机遇。关注我们,每日获取最深度、最完整、最有价值的AI行业日报,不错过每一个风口。

2026-02-26 12:54:27 430

原创 打破信息差——2月24日AI全景日报:巨头博弈、技术狂飙、政策加码,全球AI赛道迎来历史

海南省发布《“人工智能+”行动方案(2026-2028年)》,聚焦商业航天、防灾减灾等场景,打造特色AI产业生态;国内三部门明确AI算力成本纳入研发费用加计扣除,税收优惠助力企业减负。2026年2月24日,是AI行业平凡却又关键的一天。这里有巨头的兴衰、技术的突破、地缘的博弈,更有产业的希望。AI不再是遥远的未来,而是正在发生的现实。对于每一个人、每一家企业而言,拥抱AI、跟上节奏,就是抓住这个时代的最大机遇。关注我们,每日获取最深度、最完整、最有价值的AI行业日报。

2026-02-25 07:39:10 718

原创 打破信息差——2026年2月23日AI全景日报

2月23日的两大事件,彻底改写了国内大模型赛道的叙事逻辑: 过去行业比拼参数大小、训练速度、论文数量;现在行业比拼收入规模、付费用户、全球化能力、企业服务渗透率。商业化兑现,成为2026年大模型赛道唯一的核心考核标准。2026年2月23日,不是一个普通的日子。它是国产大模型商业化的里程碑,是AI民生应用的起点,是具身智能爆发的信号,也是全球AI格局重构的开始。对于普通人、创业者、企业决策者而言: AI不再是遥远的概念,而是必须抓住的机遇。2026年,所有行业都值得用AI重做一遍。

2026-02-24 11:23:17 1013

原创 打破信息差——2月22日AI全景:算力理性、视频革命、安全合规,行业正式进入下半场

AI行业进入理性深耕阶段:效率、安全、合规成新主线 2026年2月22日,全球AI行业迎来关键转折。OpenAI大幅下调算力预算,转向效率优先;Sora 2.0突破10分钟视频生成,多模态技术进入实用化阶段;李飞飞团队获10亿融资,3D空间AI加速落地。同时,AI安全风险凸显,黑客利用AI攻破600+防火墙,版权争议升级,监管趋严。行业从野蛮生长转向理性发展,算力精准投入、技术商业化落地、安全合规治理成为核心趋势。AI正从实验室走向社会基础设施,效率与风险管控并重。

2026-02-23 10:52:59 1051

原创 打破信息差——2月21日AI全域热点全复盘

2026年2月21日成为全球AI发展里程碑,行业呈现技术突破、资本重构与产业落地的多维爆发。技术端,谷歌Gemini 3.1 Pro推理性能翻倍,OpenAI发布GPT-5.3并获千亿融资,模型竞赛转向实用化;资本端,OpenAI估值逼近万亿美元,算力投资趋于理性,国产AI港股单日暴涨42%。中国实现科研与商用双突破,罕见病诊断系统登顶《自然》,智谱AI付费套餐售罄,自主生态加速成型。政策推动AI深度融入实体经济,企业进入"强制AI化"阶段。行业整体告别野蛮生长,呈现专业化、理性化、主权

2026-02-22 10:15:03 707

原创 打破信息差——2026年2月20日AI技术大爆发全解析

2026年2月19-20日,全球AI领域迎来爆发性突破。中国在医疗AI和芯片研发取得重大成果:DeepRare罕见病诊断系统登顶《Nature》,清华推出全球首款量产级全柔性AI芯片FLEXI。OpenAI、xAI等企业密集发布GPT-5.2、Grok4.2等新一代AI模型,性能显著提升。全球算力军备赛升级,英伟达、Meta等企业加速布局。资本市场火热,OpenAI融资超千亿美元,国内月之暗面获7亿美元投资。AI应用已渗透至机器人、可穿戴设备、游戏开发等多个领域,产业化进程加速。这48小时标志着AI技术从实

2026-02-20 09:11:45 3600

原创 技术速递——通义千问 3.5 深度横评:纸面超越 GPT‑5.2,实测差距在哪?

阿里通义千问Qwen3.5-Plus技术测试报告显示,该模型采用稀疏MoE、混合注意力和原生多模态三大创新架构,397B总参数仅激活17B,实现高效部署。实测验证其性能超越GPT-5.2等闭源模型,256K长文本处理速度提升19倍,多模态识别准确率达98%,Agent任务完成率100%,且百万Token成本仅0.8元。报告证实Qwen3.5在架构效率、多模态融合和场景落地方面表现优异,为中小企业提供了高性能、低成本的AI解决方案,推动开源大模型进入工业化应用阶段。

2026-02-20 08:49:21 3021

原创 打破信息差——2026年2月19日AI热点新闻速览

医疗AI行业呈现巨头布局入口、初创深耕垂类的分化格局。OpenAI推出ChatGPTHealth并收购数据公司,Anthropic主攻B端医疗流程,中国百川智能将医疗大模型幻觉率降至2.6%。央视春晚机器人表演引发外媒热议,彰显中国AI与制造业融合成果。国际方面,高通投资印度AI基金1.5亿美元,阿达尼集团计划千亿美元AI数据中心建设。美国财政部发布AI金融安全资源,Meta推出反AI勒索协议。行业趋势显示,医疗AI正从技术竞赛转向价值验证,中美应用路径差异明显,全球关注点转向AI实际效益。

2026-02-19 19:27:07 2138

原创 大模型原理剖析——多头并行 + 潜变量协同:原理、应用与部署优化

“多头并行+潜变量协同”是深度学习的核心架构,通过多子空间并行挖掘差异化特征(如LLM的语法/语义关联、ASR的频谱/时序依赖),并整合潜变量突破表达瓶颈。其优势在于: 高效并行:适配GPU/CPU硬件加速,显存占用降低50%,推理速度提升2-3倍; 精准建模:LLM生成逻辑性提升30%,ASR在噪声环境错误率降低10%-20%; 灵活部署:支持轻量模型(h=8-16,单卡部署)到大规模模型(h=32-64,多卡并行),平衡效果与成本。

2025-12-25 11:09:39 693

原创 大模型原理剖析——矩阵吸收优化:LLM推理加速的核心原理与实践

矩阵吸收优化是一种针对Transformer自注意力机制的无损推理加速技术。其核心思想是利用矩阵乘法结合律和模型参数的固定性,通过预计算合并查询和键的投影矩阵W_qk=W_q^U·(W_k^U)^T,将标准自注意力计算中的3次矩阵乘法减少为2次。该技术可降低30%-40%的计算量,实现1.5-2倍推理加速,尤其适用于长序列和高并发场景。优势包括无精度损失、实现简单、兼容其他优化技术,但仅适用于推理阶段。工程实现仅需预计算W_qk并调整计算顺序,是LLM推理优化的有效手段。

2025-12-25 10:08:39 1010

原创 大模型原理剖析——解耦RoPE(旋转位置编码)的基本原理

本文介绍了改进传统旋转位置编码(RoPE)的解耦RoPE(DRoPE)方法。传统RoPE将位置与维度直接耦合,导致长序列场景下高频维度饱和、低频维度区分度不足的问题。解耦RoPE通过引入独立的缩放因子,拆分位置与维度的耦合关系,使不同维度的位置编码敏感度可独立调节。分组解耦形式分别设置高低频维度的缩放因子,平衡长短序列表现。代码实现显示该方法仅需轻微修改传统RoPE计算逻辑,不增加额外开销。解耦RoPE显著提升了模型对长序列的适应性,可广泛应用于长文本建模和大模型上下文扩展场景。

2025-12-23 13:59:43 1101

原创 大模型原理剖析——突破LLM效率瓶颈:多标记预测(MTP)技术深度解析与实战

多标记预测(MTP)技术通过单次前向传播同时预测多个后续词元,显著提升大语言模型的生成效率。相比传统逐词元生成方式,MTP在训练阶段增加信号密度,推理阶段结合推测解码可实现1.8-2.6倍加速。DeepSeek提出的链式MTP架构通过依赖前序表征保证文本连贯性。实战示例展示了PyTorch实现框架,包含共享编码器和多头预测结构。MTP在长文本生成等场景优势明显,是优化LLM性能的重要方向。

2025-12-23 11:05:02 1299

原创 大模型原理剖析——多头潜在注意力 (MLA) 详解

多头潜在注意力(MLA)是DeepSeek团队提出的创新机制,通过低秩压缩键值缓存至潜在空间,显著降低内存占用(减少53%)和计算开销(延迟降低53%)。MLA采用解耦RoPE、矩阵吸收优化等技术,在保持模型性能的同时支持长文本处理(32K token)。相比传统注意力机制,MLA具有内存效率高(缓存仅为MHA的1/8)、计算速度快等优势,特别适合大规模模型部署和多模态融合应用。该技术为AI系统的高效化开辟了新路径,有望成为下一代大模型的标准组件。

2025-12-22 20:52:28 1360

原创 大模型原理剖析——DeepSeek-V3深度解析:671B参数MoE大模型的技术突破与实践

DeepSeek-V3通过“MoE架构+MLA注意力+负载均衡+混合精度训练+MTP生成”的技术组合,在671B参数规模下实现了“能力强、速度快、成本低”的平衡;而DeepSeek-R1则填补了“深度逻辑分析”的场景空白。二者形成互补,覆盖了通用任务与专业推理的需求。

2025-12-22 20:09:41 1244

原创 大模型原理剖析——拆解预训练、微调、奖励建模与强化学习四阶段(以ChatGPT构建流程为例)

本文解析了ChatGPT四阶段构建流程:1)自监督预训练阶段通过海量文本学习语言规律;2)有监督微调阶段用标注指令数据训练模型理解人类需求;3)奖励建模阶段构建文本质量评估体系;4)强化学习阶段基于反馈优化模型输出。每个阶段在数据规模、算法类型和计算资源上都有特定要求,通过层层递进的训练最终实现模型的智能表现。该流程体现了从基础能力奠基到精细化优化的完整技术路径。

2025-12-21 17:14:35 1084

rafdb表情识别数据集

用于表情识别的rafdb数据集

2023-02-23

python学生成绩管理系统合集.zip

其中包含一个实验报告和三个版本的学生成绩管理系统 三个版本分别为 tkinter界面 PyQt5界面 PyQt5界面+MySql

2023-02-17

机器学习资料、实验代码及报告.zip

学习机器学习过程中的资料、代码和实验报告,可供学习使用 其中包括 实验1-机器学习入门 实验2-KNN分类 实验3-贝叶斯分类上 实验3-贝叶斯分类下 实验4-决策树分类器上 实验5-支持向量 实验6-线性回归 实验7-聚类分析 实验8-降维分析 实验报告 机器学习实战 机器学习模型分类汇总

2023-02-17

三国人物关系词频分析词云图.zip

三国人物关系的词云图,通过从txt文件中读出文本进行分词、数据处理、词频分析获取词频与词云图

2023-02-17

航拍语义分割(附数据集).zip

使用航拍数据集进行的语义分割操作,其中有两种语义分割的方法,有早期的U-net模型,也有较为新的deeplabv3+模型,其中包含数据集,代码形式为jupyter notebook,便于观察数据的变化

2023-02-17

用于语义分割的航拍数据集

数据集包含6个类别: 1、Building: #3C1098 2、Land (unpaved area): #8429F6 3、Road: #6EC1E4 4、Vegetation: #FEDD3A 5、Water: #E2A929 6、Unlabeled: #9B9B9B

2023-02-17

手写数学符号识别项目-Handwritten-math-symbols-recognition.zip

数据集来自:https://www.kaggle.com/datasets/xainano/handwrittenmathsymbols 由82个类别,共计30万张图片,重写数据加载器解决了在笔记本上数据过大难以加载的问题,使用了现代常用的CNN网络如VGG,googleNet,resNet等进行模型的训练

2023-02-17

fashionMNIST数据集

由于学习pytorch时出现这个数据集的下载问题,所以在这里免费分享一下,如果对您有帮助希望能给我一个关注,谢谢

2023-01-07

使用opencv-python实现的基于模板匹配的银行卡号识别项目

使用opencv-python实现的基于模板匹配的银行卡号识别项目,有详细的代码解释过程

2023-01-04

柠檬质量分类数据集(Lemon Quality)

可以用于区分好柠檬和坏柠檬的数据集,其中包含好柠檬、坏柠檬、拍照背景图片,可以用于区分柠檬好坏

2022-11-06

车标分类数据集(car logo datasets)

用于图像分类的车标分类数据集

2022-11-06

用于狗狗表情识别的数据集

一个用于狗狗表情识别的数据集,包含愤怒,开心,放松,难过四种标签,可以用来训练用于识别狗狗表情的深度学习模型,适用于深度学习或图像处理的学习者

2022-11-04

基于tensorflow的手语检测

1. 使用的模型是centernet 2. 使用predict.py可以进行预测 3. 使用的环境是tensorflow 4. 建议安装cuda使用 5. 该检测容易误检人脸,建议演示时避免人脸靠得太近 6. 根据手语对照表可以使用项目检测相应的手语

2022-11-04

python实现含UI界面和数据库的学生成绩管理系统.zip

Python实现的一个使用PyQt5写的带UI界面的学生成绩管理系统,并且可以链接MySQL数据库

2022-11-04

python图片批量去重脚本.zip

基于opencv写了一个图片批量去重的python脚本,可以对比图片相似度并且保留相似但是更为清晰的图片

2022-11-04

人脸检测和动漫脸检测剪裁脚本.zip

一个用于批量识别并裁剪文件夹中所有图片中出现的人脸或者出现过的动漫脸的轻量级python脚本,可以将自己收集的含有人脸的图片直接裁剪出来,可以供后续的人脸识别做准备。注:文件夹路径分隔要用“/”而不是“\”,可私信讨论

2022-11-04

可以用于将图片转换为扫描样式的图片二值化工具

可以用于将图片转换为扫描样式的图片二值化工具

2022-11-04

包 子 阳 智 能 优 化 算 法 及 matlab 实 例 源 代 码

包 子 阳 智 能 优 化 算 法 及 matlab 实 例 源 代 码

2022-05-25

python实现用于图片拟合的免疫遗传算法

为了快速理解免疫遗传算法,以图片拟合为背景,使用python实现免疫遗传算法的手动实现,详细解析请查看我的博客:https://editor.csdn.net/md?not_checkout=1&articleId=124096240

2022-04-11

交叉进化算法python手动实现

python手动实现交叉进化算法对于函数最值的求解

2022-03-09

法律人工智能幻觉基准测试V2(Legal AI Hallucination Benchmark V2)-评估法律推理、智能合约与GDPR中的LLM准确性-30个场景

关于数据集 法律人工智能幻觉基准测试V2 概述 这是一个扩展和优化的基准数据集,旨在评估、测试和衡量大型语言模型(LLMs)在法律推理、幻觉检测以及领域特定准确性(包括智能合约逻辑和法律合规性)方面的表现。 主要目标 幻觉基准测试:识别法律AI模型生成不准确法律引用、伪造虚假条款或误解真实法律的情况。 精准评估:评估大型语言模型对复杂法律文本和逻辑的准确解读。 智能合约与人工智能安全:在自动化法律合规和漏洞检测环境中测试模型性能。

2026-09-18

糖尿病风险预测-一个包含15,000个患者档案的综合表格数据集,用于机器学习

关于数据集 该数据集旨在为机器学习分类提供一个稳健且受临床启发的基准测试。预测糖尿病风险需要理解患者人口统计学特征、生活方式和临床生命体征之间的复杂关系。该数据集作为一个教育沙盒,供数据科学家练习特征工程、处理缺失数据,并基于临床可行的模式训练预测模型。 你可以用这个数据集做什么: 训练多类别分类模型以预测糖尿病风险(低、中度、高)。 练习处理非随机缺失数据(例如酒精摄入栏)。 进行探索性数据分析(EDA),以寻找生活方式因素、收入阶层与印度健康结果之间的相关性。

2026-09-18

跨时代的全景牙科X光片(OPG)

关于数据集 描述 该数据集包含了从不同年龄段(3至64岁)患者采集的正全景牙科X光图像子集,涵盖男性和女性受试者。每张图像最初都是为医院放射科的常规临床和治疗目的拍摄,后来经过适当的伦理许可后被重新用于研究用途。 什么是OPG? 正全能成像(Orthopantomogram,简称OPG),也称为全景牙科X光片或全景X光,是一种单一的二维X光图像,能够在一张平面上捕捉整个口腔——包括: 上下牙(上下牙)全部 支撑骨骼结构 颌关节(颞下颌关节,TMJ) 鼻窦 鼻腔 OPGUs(操作数据系统) 工作原理:与标准牙科X光只捕捉口腔小区域不同,OPG机器绕患者头部旋转,呈半圆形。X射线源和胶片/传感器在头部两侧同步移动,拍摄连续的全景图像。这样可以同时产生一张显示双下颌的宽广图像,而无需多次单独曝光胶片。 临床应用原因: 评估整体牙齿健康、蛀牙和牙齿位置 评估阻生或未萌出牙齿(例如智齿) 检查下颌和骨骼异常、囊肿、肿瘤或感染 正畸治疗计划(牙套/矫正) 法医和儿童牙科中的年龄估计(通过牙齿发育阶段) 术前规划(种植牙、拔牙) 跨年龄段的全景牙科X光片(OPG) 为什么它对研究有价值:由于OPG能揭示牙齿的数量、萌发阶段和牙根发育,因此被广泛用于年龄估算研究——将牙齿成熟度(在X光片中可见)与年龄相关联。这在法医科学、儿科生长研究和法律年龄验证中尤为有用。 数据集内容 24张全景X光片图像(PNG格式) 每个文件名编码:(例如,= 24岁女性,唯一ID 1286)Age-Sex-ID24-F-1286 年龄范围为3岁至64岁 男女(M)两个科目都有代表

2026-09-18

TikTok 商店销售数据集

关于数据集 TikTok 商店病毒视频销售、归因与CAC分析数据集 10万笔交易 • 180+ 功能 • 创作者经济学 • 多点归因 • CAC优化传统的电子商务分析模型正在失效。在现代社交电商生态系统如TikTok Shop中,病毒性、创作者权威和微留存曲线决定了收入,而非标准搜索流量。 该数据集提供了一个生产级分析环境,包含10万条细粒度观测值和180+特征。它弥合了非结构化社交媒体视频互动(吸引人、重看、丢弃)与企业财务表现(ROAS、CPA、净利润率、多重触发归因)之间的差距。 为什么该数据集优于标准数据集的端到端客户路径:跟踪从视频展示和3秒挂钩到产品转化和退货风险的完整过程。 现代社交商务向量:包括网红分级、联盟追踪和病毒视频钩子动态,这些都是传统零售数据集忽视的。 高级财务指标:衡量扣除创作者佣金、平台费用、运费和客户获取费用后的真实净利润率。 多点归因引擎:具备首次触球、最后触球、线性、基于位置和数据驱动的收入归因模型。 数据集模式与特征向量(180+特征)数据结构化为6个相互关联的分析向量: 1. 视频表现与内容引子动态 视频时长、独特曝光量、点赞数、分享数、保存数、3秒和10秒的留存曲线、精确的跌倒秒、重看比例、病毒评分和钩子清晰度评分。 2. 创作者与联盟智能创作者层级(微型、中型、超级级)、粉丝数、互动速度、历史转化权威、联盟佣金层级及影响者投资回报率影响。 3. 财务与单位经济学 总收入、净利润率、每次获客成本(CPA)、客户获取成本(CAC)、广告投放回报率(ROAS)、平台费用和营销投资回报率。 4. 多点归因模型:首次点击收入、最后点击收入、线性归因、时间衰减归因、基于位置的模型和机器学习归因置信度评分。 5. 漏斗与流量分析 产品页面点击量、购物车添加率、结账弃置率

2026-09-17

AI基准与人类基线-人类在36项AI基准测试中得分

关于数据集 概述 每当实验室宣布某个模型“击败了人类”时,这个说法都是建立在人类基线之上。该数据集收集了这些基线——它们到底是什么,谁被检测过,以及有多少人根本没有被测量过。 它涵盖了36个基准测试,涵盖抽象推理、科学、数学、常识、编码和智能任务,从HellaSwag(2019年)到ARC-AGI-3和CritPt(2026年)。对于每一个数据,它记录已发布的人类基线、生产该基线的人群、基准发布时的最佳AI分数、此后报告的最佳分数,以及对每个数据的置信度评级。 然后它做了排行榜做不到的事:标记缺失的内容。36个基准中有9个根本没有测量到人类基线——包括GSM8K、SWE-bench Verified、Humanity's Last Exam和MMLU-Pro。其中几项广泛重复的“人类评分”未出现在原始论文中。 数据集还包括相同任务的题目层级人机结果:528个ConceptARC测试输入,其中482名众工和4名机器求解者尝试了完全相同的抽象推理问题。 动机 “超越人类表现”这个词有很大分量,几乎没有标准化。在这36个基准中,人类基线结果各异: 匹配领域的博士专家(GPQA:65%) 一个非专业化的人群工作者(MMLU:34.5%) 一位三届IMO金牌得主(数学:90%) 一位付费培训师放弃了70%的问题(BrowseComp:29.2%) 这是一项从未被验证过的估计(MMLU:89.8%) 完全没有(GSM8K、SWE-bench Verified、HLE和其他六个) MMLU用一排说明了整个问题。著名的“89.8%人类专家”数字是基于第95百分位考试成绩加上公认猜测得出的估算。那篇论文中唯一实际测量的人类得分是34.5%。这两个号码都在这里,标明了它们的身份。

2026-09-17

交通事故预测指标数据集

交通事故预测指标与评估输出 CVPR 2026的基准评估记录与时空特征 该数据集包含了通过《模块化零样本流水线用于交通监控视频事故检测、定位与分类》(CVPR 2026)参考实现生成的评估输出、动力运动矢量统计和零样本分类记录。 1. 概述与数据集内容 该数据集是根据我们可重复的管道笔记本输出自动生成的: traffic_accident_benchmark_predictions.csv:结构化评估记录,包含时间戳、视频帧、预测类别、置信度和归一化边界框坐标。 spatiotemporal_incident_metrics.json:Gunnar Farneback 密集光流矢量场度量、动力学通量峰值及熵评分。 pipeline_export_config.json:全局管道超参数配置及类词汇定义。 2. 文件与列模式 traffic_accident_benchmark_predictions.csv Event ID:唯一事件标识符。 Timestamp (s):峰值减速冲击波时间戳以秒计。 Frame:峰值动能异常的帧指数。 Top Predicted Class:对比视觉语言预测事件类别。 Confidence: 软最大概率分数。 Bounding Box:归一化的空间坐标。[ymin, xmin, ymax, xmax] Inference Mode:模型评估体系()。Zero-Shot Status:操作验证状态。

2026-09-17

合成水鸟分类数据集(waterbird-complete95-forest2water2)

Waterbirds 是面向虚假相关性、分组鲁棒性与分布偏移研究的经典图像分类基准数据集,由Sagawa等人在Group DRO相关研究中构建,广泛用于最坏场景泛化、模型鲁棒性优化等机器学习任务。该数据集共计11788张合成鸟类图像,融合两大公开数据集资源:鸟类前景取自CUB-200-2011鸟类数据集,场景背景源自Places场景数据集,通过人工拼接构建出存在显著训练偏置的样本数据。 数据集以鸟类类型为预测目标(0为陆生鸟、1为水鸟),背景场景为干扰性虚假属性(0为陆地、1为水域),并依据「鸟类种类+背景」组合划分出4个数据分组。其核心特征为训练集存在强数据偏置,约95%的训练样本呈现“陆生鸟配陆地、水鸟配水域”的匹配关联,而验证集与测试集采用均衡背景分布,有效打破训练集的虚假关联,能够精准检验模型是否依赖浅层统计特征、能否实现各组尤其是小众难样本组的稳定泛化。 数据集官方划分固定,包含4795张训练集、1199张验证集、5794张测试集,各组样本数量不均衡,是测试分布鲁棒优化算法(如Group DRO)、正则化策略有效性的标准 benchmark。同时数据集保留原始标注与文件结构,支持精准的分组准确率、最差组准确率等关键鲁棒性指标评估,仅可用于非商业科研与教育场景,是域偏移、模型公平性、最坏情况泛化研究的核心实验数据集。

2026-09-17

黑色素瘤皮肤癌数据集-良性与恶性

关于数据集 该数据集包含用于将黑色素瘤皮肤癌分为 良性和恶性两类的二元分类的皮肤镜(皮肤病变)图像。 数据集结构 总图片:13,900张 训练数据:~11,900张图片(良性+恶性) 测试集:2000张图像(1000张良性 + 1000张恶性) 课程 良性——非癌性皮肤病变 恶性 - 癌性(黑色素瘤)皮肤病变 使用场景 该数据集适用于: 训练CNN、Vision Transformer或混合深度学习模型进行 皮肤癌分类 医学图像分析中的迁移学习实验 早期黑色素瘤检测系统研究 背景 黑色素瘤是最危险的皮肤癌类型之一,早期发现 显著提高了生存率。该数据集支持利用皮肤镜影像实现 的自动化、人工智能辅助黑色素瘤诊断研究。

2026-09-17

甲状腺癌复发数据集(RAI 治疗后的甲状腺癌数据集,分析性别、年龄和风险因素)

该数据集侧重于放射性碘 (RAI) 治疗后的甲状腺癌复发情况。它包含 383 份患者记录,具有 13 个关键属性,包括年龄、性别、癌症分期、病理类型、风险分类、治疗反应和复发状态。这些数据对于预测癌症复发、了解风险因素和评估治疗结果很有价值。

2025-04-15

注释超声肝脏图像数据集

该数据集包含一组带注释的肝脏超声图像,旨在帮助开发用于肝脏分析、分割和疾病检测的计算机视觉模型。注释包括肝脏和肝脏肿块区域的轮廓,以及良性、恶性和正常病例的分类。此数据集提供肝脏的超声图像和详细的注释。注释突出显示肝脏本身和存在的任何肝脏肿块区域。这些图像分为三类: 良性:显示良性肝脏状况的图像。 恶性:显示肝脏恶性病变的图像。 正常:健康肝脏的图像。

2025-04-15

IMDb 电影类型分类数据集

movies_overview.csv: title:电影标题 overview:电影的简要说明或概要 genre_ids:一个或多个流派标识符(可以是多标签) movies_genres.csv: id:流派标识符 name:对应的流派名称

2025-04-15

电动汽车保有量数据集(来自美国政府的电动汽车数量数据)

此数据集提供了有关目前在美国注册的电池电动汽车 (BEV) 和插电式混合动力电动汽车 (PHEV) 的详细信息,特别是通过华盛顿州许可部 (DOL)。该数据集包括这些电动汽车的各种属性,例如品牌、型号、注册年份以及反映华盛顿州电动汽车采用增长趋势的其他相关数据。它提供了有关道路上电动汽车类型及其地理分布的宝贵见解,并帮助跟踪该州电动汽车使用情况的演变。对于有兴趣研究美国电动汽车市场的政策制定者、研究人员和组织,以及开发基础设施和服务以支持日益增长的电动汽车需求的人来说,该数据集是一个有用的资源

2025-04-15

土壤污染和相关健康影响数据集

该数据集包含 3000 条合成记录,用于模拟土壤污染和相关疾病的真实场景。它捕获环境、农业和人口统计变量,以分析土壤污染与人类健康结果之间的相关性。数据是使用概率模型和领域知识生成的,使其适用于探索性分析、机器学习和环境健康研究。 主要功能包括: 土壤中的污染物类型和浓度 土壤和天气条件 农业实践和附近的行业分布 报告的疾病类型、严重程度和症状 受影响的人口统计细分 缓解措施和案例解决方案 它非常适合用于数据科学项目、公共卫生研究、环境建模和预测分析。

2025-04-15

沃尔玛股票数据(2000年至2025年)

Walmart Inc. 是一家全球性的美国零售集团,主导着美国市场的大部分。沃尔玛在财富全球 500 强全球最高收入企业名单中一直名列前茅。 截至 2025 年 3 月,沃尔玛的市值为 6795 亿美元。这使得沃尔玛成为全球市值最有价值的公司之一。市值,通常称为市值,是上市公司流通股的总市值,通常用于衡量公司的价值。

2025-04-15

骨折数据集 – 胫骨和腓骨

该数据集旨在开发用于胫骨和腓骨骨折分类和定位的机器学习模型。它包含格式的 X 射线图像,其中一些图像已由埃塞俄比亚 Gondar 大学的医学专家验证,而其他图像则来自公共存储库。 该数据集旨在支持: 自动诊断胫骨和腓骨骨折 深度学习在骨科放射学中的应用 医学影像研究和临床决策支持 所有图像均为 PNG 格式,并经过图像增强和增强,以提高机器学习任务的质量和可用性。 包含的文件: 胫骨和腓骨的 PNG 格式 X 射线图像集合 图片来自: 贡达大学转诊医院 MURA(肌肉骨骼 X 光片)数据集 总大小:319 MB

2025-04-15

300IDUO卡mindie镜像百度云

适用于300IDUO的mindie环境的Docker镜像,已上传到百度云

2025-03-12

GraphRAG输出中文提示词

在使用GraphRAG时发现,生成的结果均为英文,并不能直接使用。 经历了对于提示词的逐步调整,总算是整理出来了一套可以输出中文知识图谱的提示词 使用方式:解压后替换掉原先的提示词文件即可

2025-02-18

OpenCV、Python和scikit-learn进行智能图像处理-资料以及代码.rar

OpenCV、Python和scikit-learn进行智能图像处理——资料以及代码

2023-04-05

PyQT5-代码实例库

个人在使用PyQt的过程中遇到使用过的一些PyQt的各类小demo 按照控件和功能用法分好类了,方便查找和学习

2024-04-13

加州房价数据集(california-house-prices)

加州房价数据集,可以用于数据分析、机器学习和深度学习的学习使用

2023-03-09

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除