- 博客(1502)
- 资源 (4)
- 收藏
- 关注
RSS订阅
原创 【LLM】多模态LLM综述MultiModal Large Language Models
note（一）现有的 MM-LLM 的趋势：(1)从专门强调 MM 理解对特定模态的生成的进展，并进一步演变为任何到任何模态的转换（例如，MiniGPT-4 → MiniGPT-5 → NExT-GPT）；(2) 从 MM PT 提升到 SFT，然后到 RLHF，训练管道进行连续细化，努力更好地与人类意图对齐并提高模型的会话交互能力（例如，BLIP-2 → InstructBLIP →DRESS）；(3) 实施多样化模态扩展（例如，BLIP-2 → X-LLM 和 InstructBLIP→X-In
2024-06-02 13:05:46
5595
8
原创 【CVPR2026】VideoSSR: Video Self-Supervised Reinforcement Learning
note核心： 从原始视频自动构造时序排序、物体计数、异常定位等可验证任务，再通过 RLVR 提升模型的视频理解能力。VideoSSR 提出，不必依赖昂贵的人工标注或容易带偏见的模型标注，而是直接对原始视频做可控制的扰动，自动生成“答案天然可验证”的训练题，再用强化学习训练多模态大模型的视频理解能力。VideoSSR 最有价值的地方，不是单纯提出三个训练游戏，而是提出了一套数据生产机制。传统范式是：人工理解视频 → 出题 → 标注答案 → 模型学习。VideoSSR 的范式是：视频本身保存答案 →
2026-10-11 21:02:48
295
原创 【OPD】Rethinking On-Policy Distillation: Phenomenology, Mechanism, and Recipe
动机：OPD 已成为后训练常用方法，但一个强 teacher 为什么有时能提升 student、有时完全无效，过去解释并不清楚。本文系统研究 OPD 的成功条件和 token-level 机制。发现：OPD 成功需要两个条件：① teacher 与 student 的 thinking pattern 兼容；② teacher 必须提供 student 训练分布中真正没见过的能力。仅仅 teacher 分数更高还不够。论文通过 weak-to-strong reverse distillation 发现，
2026-10-07 15:02:31
270
原创 【VLM】DeepSeek-V4.1-Flash: Pushing the Limits of KV Cache Compression
一、DeepSeek-V4.1-Flash一、DeepSeek-V4.1-FlashDeepSeek-V4.1-Flash: Pushing the Limits of KV Cache Compression技术报告：https://huggingface.co/deepseek-ai/DeepSeek-V4.1-Flash/blob/main/DeepSeek_V41_Tech_Report.pdf Hugging Face模型定位：552B MoE，多模态输入，最大 1M context。最
2026-10-07 14:28:25
385
原创 【Video Agent】LongVT: Incentivizing “Thinking with Long Videos” via Native Tool Calling
note让大模型学会"主动回看"长视频为什么必须用 IoU 而不是 Recall？ Recall 可靠"把窗口拉得巨大"刷高，IoU 的分母会惩罚过宽预测。这是全文最漂亮的一个奖励设计：把"答对"和"证据位置"绑定——只奖答案会诱导语言先验，只奖 IoU 会找到相关片段却答不对。训练pipeline：SFT 教动作 → RL 学决策与泛化 → RFT 巩固成功行为构建 VideoSIAH；247.9K tool-SFT → 1.6K agentic RL → 15.4K RFT，并联合 answe
2026-10-07 11:32:59
314
原创 【Video】LongVideo-R1: Smart Navigation for Low-cost Long Video Understanding
动机：长视频不能全量送进 MLLM，uniform/exhaustive search 成本高、冗余多。目标是学会：当前证据够不够；不够的话下一步该看哪一段。核心动作：预先把视频构造成 High / Medium / Low 三层 hierarchical captions。推理时模型先只看 High-level captions；若证据不足，就根据问题 + 当前已有证据选择最相关的时间段，调用工具展开该段的 Medium-level captions；仍不足再继续下钻到 Low-level / 具体 c
2026-10-07 01:22:47
330
原创 【Vid】Thinking With Videos: Multimodal Tool-Augmented Reinforcement Learning for Long Video Reasoning
核心结论： VITAL 让多模态大模型在回答视频问题前，先判断“要不要回看、回看哪一段”，再通过视频裁剪工具获取关键时间段的密集帧，形成“文本推理 + 视觉证据”的多模态思维链。该方法主要解决长视频理解中的跨模态交互不足和幻觉，在 11 个视频理解基准上取得领先，尤其擅长长视频问答和时间定位。VITAL 的本质，是教会多模态大模型在视频推理中“不懂就回看”：模型先形成时间假设，再调用视频裁剪工具密集观察关键片段，最后依据真实画面作答；通过 SFT 冷启动与 DGRPO 强化学习，将时间定位、视频问答和
2026-10-07 00:20:19
598
原创 【Agent】A harness for every task: dynamic workflows in Claude Code
一、dynamic workflows多智能体为什么要多智能体？单上下文窗口的三大失败模式：Agentic laziness：安全审查 50 项，做到 35 项就宣布"完成"自我偏好偏差：让 Claude 给自己的结果打分，它总会手下留情目标漂移：长任务反复压缩上下文后，"别做 X"这类约束悄悄丢失在这里插入图片描述Anthropic给出六种可组合的模式：分类路由、扇出-综合、对抗验证（每个干活的智能体配一个唱反调的）、生成-过滤、锦标赛排序、循环直到收敛。Bun 从 Zig 到 Rust
2026-10-06 20:06:02
304
原创 【Agent】自进化Dream-RSI
真实环境先探索出很多历史轨迹/分支 → 用这些历史树做低成本 replay → 比较“不同搜索策略”怎么走更有效 → 更新上层探索 policy → 再回到真实环境探索文章目录note一、Dream-RSI: Recursive Self-Improvement through Evolving WorldsReference一、Dream-RSI: Recursive Self-Improvement through Evolving WorldsDream-RSI: Recursive Se
2026-10-06 18:43:14
288
原创 【DiT】从常微分方程ODE到Flow Matching
常微分方程（Ordinary Differential Equation）的【常】，不是指常数，是指【未知函数只依赖一个自变量】，比如y=y(x)y=y(x)只依赖 xx ，那么dydx=f(x,y)dxdy =f(x,y)就是ODE偏微分方程PED：如果未知函数依赖多个自变量，就会出现偏导数。例如u=u(x,t)u=u(x,t)既依赖空间 xx ，又依赖时间 tt 。那么可能出现：∂u∂t=α∂2u∂x2
2026-10-06 15:32:41
503
原创 【VLA】Qwen-VLA:VLM+DiT统一多模态理解与连续机器人动作生成
note动机： 传统具身智能模型通常针对单一任务/机器人分别训练，例如机械臂操作、导航、轨迹预测各用一套模型，跨任务、跨环境、跨本体泛化差。Qwen-VLA 希望把这些任务统一成一个“视觉+语言→连续动作/轨迹”的通用模型。核心方法： 以 Qwen3.5-4B VLM 为认知骨干，负责视觉理解、空间推理和指令理解；外接约 1.15B DiT flow-matching action decoder，生成连续机器人动作。通过 embodiment-aware prompt 告诉模型当前机器人类型、单/双臂
2026-10-05 23:59:52
358
2
原创 【WM】OSCAR: Omni-Embodiment Action-Conditioned World Model for Robotics
输入 = 当前场景首帧图片 + 未来一段机器人的 2D 运动学骨架序列；输出 = 按这段骨架动作发展出来的未来机器人视频。OSCAR 不是又一款追求“画面像不像”的视频生成器，而是把动作条件视频预测改造为策略筛选器：给定一个真实首帧和给定策略的动作轨迹，模型自回归生成未来视频，再由 GPT-5 判读成功率，以此预测 RoboArena 真实排名。它的核心设计是 2D 运动学骨架：把不同机械臂或人手的关节链投影成无纹理线条，使条件既显式地约束“何时、在哪里动”，又不必把模型绑死在特定机器人外观上。论文最强
2026-10-05 22:42:35
491
原创 【VLM】Qwen3.8-Omni-Flash论文解读
Thinker = 稀疏 MoE 语言主干（来自 Qwen3.8-Next）+ GDN 递归层 + 交错 Attention + QSA 稀疏注意力 + 三路模态适配器。它是唯一持有 1M 上下文的模块，负责理解、长链推理、工具调用决策，并输出语义状态给 Talker。Talker = 轻量流式解码器，只做“语义 → 语音流”。它不参与推理、不持有长上下文，换来的是边想边说的低首包延迟。这是“推理深度”与“说话流畅”解耦的关键。Qwen3.8-Omni-Flash 不是“又一个新的多模态模型”，而是
2026-10-05 15:58:07
242
原创 Jev：Reinforcement Learning for Calibrated Decisions as a Zero-Shot Detector of AI Alignment Failures
这篇论文证明了"RLCD 模型（Jev）可以当零样本、低成本的 AI 对齐失败检测器"，但代价是必须做好两件事——补齐定义失败的参照上下文、用小样本重新拟合阈值，否则排名好看、实际部署会翻车。不用生成长文本，直接让 Jev 对很多判断问题输出概率，比如 P(jailbreak)=0.93、P(hallucination)=0.12，并测试这种概率能不能直接检测 alignment failureGenerative Judge → Probabilistic Judge，不生成 “Yes, this i
2026-10-01 14:31:23
313
1
原创 【Jev】Jev模型和Laya架构
在无法解决确定性的场景面前：快没有太大的意义，省钱也没太大的意义，jev只是一个零样本条件下的排序/分类模型，还是概率【不确定性】。本质上还是猜【单单地猜的更快、更准些】，0-1而非 0/1【不保真】TypeSafe AI 也在 Jev 1.13 的能力说明中提醒，模型在算术、计数、日期、字面匹配、无关信息干扰、对抗性输入和矛盾条件等任务上表现并不稳定。文章目录note一、相关开源项目1、Laya2、awesome-jev-gallery二、相关例子三、相关论文A、生态与全景观察（1 篇）
2026-09-27 17:43:34
219
原创 【AI Infra】最近的一些AI Infra工作
第一档：KVSET —— 学 KV Cache 的 capacity planning / cache theoryOasisKV —— 学 HBM → Host → Remote 的 KV memory hierarchy + prefetchSYMPHONY —— 学 Compute-Memory DisaggregationSmartGen —— 学 PD Disaggregation 下 KV 网络传输CacheSlide —— 学 Agent/RAG 场景的 General KV Reu
2026-09-24 22:09:46
283
原创 【IJCAI 2026】Dual-Topology Learning with Adaptive Anchors for Multi-View Clustering
传统多视图聚类虽然用 Anchor 降低了计算量，但通常只学“样本和 Anchor 的关系”，而且还经常强行让 Anchor 彼此正交，容易把真实数据结构搞坏。DOTA 的核心就是多学一层：除了 Sample-Anchor，还显式学习 Anchor-Anchor 的关系，尤其用 S^S^TS^ S^ T 看“两个 Anchor 是否共享很多相同样本”，来判断它们是不是应该更相似。最终就是把“样本→Anchor”升级成“样本→Anchor→Anchor”的双拓扑，再配合不同
2026-09-23 13:03:54
111
1
原创 【Mamba】Nemotron 3 Ultra、混元Transformer-Mamba
Mamba优化了状态空间的选择性传播，能够根据输入动态调整其参数，从而在不同的序列时间点选择性地传递或遗忘信息文章目录note一、Mamba模型架构二、混元T1推理大模型三、NVIDIA Nemotron 3 UltraReference一、Mamba模型架构Mamba 是一种新兴的序列建模框架，它通过使用选择性状态空间模型（SSM）提供了比传统的Transformer模型更高的计算效率。Mamba的设计允许它在处理长序列时保持线性的扩展性，并大幅提升了处理速度。这一模型特别适用于处理语言、
2026-09-19 17:20:06
171
原创 【ICML 2026】脑科学Mind-Omni
核心：把 fMRI 脑信号也变成一种“token 模态”，然后和图像、文本一起塞进一个统一的离散扩散模型里，让同一个模型同时做脑→图、脑→文、图→脑、文→脑、脑问答等 7 类任务把脑信号 Token 化，它本质很像 VQ-VAE：encoder 把脑信号编码，再量化到 codebook 里的离散向量，最后还可以 decoder 回原始 fMRI。论文里的 Brain Tokenizer 就是 VQ-VAE 风格结构，包含 encoder、decoder 和离散 codebook。主流VLM的视觉toke
2026-09-19 16:41:31
119
原创 【LLM】Looped Transformers
循环 Transformer 本质上是一种架构上的微调，核心思路是让中间表示多次通过同一批 Transformer 块，而不是只过一次。相比单纯堆更多的块，这里的「诀窍」在于：在这些遍历过程中，权重是保持不变的。文章目录note一、GPT-6 Astra, Looped Transformers二、Nanbeige4.2-3B模型三、隐藏思维链Reference一、GPT-6 Astra, Looped Transformers1、GPT-6 Astra, Looped Transforme
2026-09-18 23:07:18
203
原创 【VLM】2026年文档解析技术发展和趋势
文档解析三个特征：视觉token极压缩："光学压缩"成了新卖点推理加速成为显学：多token预测+投机解码被卷到这个领域训练全面转向"可验证奖励的强化学习"（RLVR）LightOnOCR和olmOCR用unit-test式评估+GRPO；Infinity-Parser2一次co-train八个任务；Jina-OCR-v1用五维乘积奖励（内容、结构、单元测试、重复、格式）给部分分，并特意合成公式/表格密集页喂奖励。三个判断：下一个瓶颈不在"看"，在"结构推理"从"全局压token"转向"按
2026-09-18 22:55:25
163
原创 【RSI】The Last AI Built by Humans: Toward Genuine Recursive Self-Improvement
The Last AI Built by Humans: Toward Genuine Recursive Self-Improvement链接：https://arxiv.org/abs/2609.11873Motivation：当下很多Agent工作宣称实现AI自我改进，但大多只是上下文内微调、固定流程试错，没有统一标准区分“表层自优化”和真正递归自我改进（RSI）。缺乏可量化的分层框架，用来评估AI自主迭代能力。方法与问题：提出5级RSI能力栈：L1执行自动化、L2策略搜索、L3经验自动化、
2026-09-18 22:38:05
230
原创 【VLM】Qwen3.8-Omni-Flash长音视频理解Agentic模型
Qwen3.8-Omni-Flash1、向 Qwen3.8-Omni-Flash 提出了一项任务：在 12 小时内提升 Qwen2.5-Omni-3B 的四川话识别能力，并交付可用模型。它自主选定 WenetSpeech-Chuan 评测集、固定评测标准并完成基线测试，随后直接听取语音样本，结合识别结果诊断问题，构建针对性的训练数据。在连续 4 轮实验中，Agent 累计构建了 3,413 条训练数据，并根据评测反馈调整方案、保留有效改进、回退无效尝试。最终，Qwen2.5-Omni-3B 在同一评测集上
2026-09-18 22:31:49
350
原创 【VideoLLM】LensWalk: Agentic Video Understanding by Planning How You See in Videos
如果做长视频/长文档/长音频理解，值得抄的是这个骨架——"粗扫定位 → 聚焦取证 → 拼接验证"三件套 + 带时间锚的证据 + 全局实体表，并且把"看多少、看多细"作为可学习/可调度的参数暴露给推理器，而不是埋在预处理里。LensWalk = LLM Planner + VLM Observer + 三种视频观察工具 + 时间戳/实体 Memory。文章目录note一、研究动机：视频理解的核心矛盾是"推理"与"感知"脱节二、论文核心：让 LLM 自己决定"看哪儿、看多密"2.1 整体架构：Rea
2026-09-13 16:57:06
258
原创 【VideoLLM】Video-o3: Native Interleaved Clue Seeking for Long Video Multi-Hop Reasoning
总结：让 7B 视频大模型像侦探一样，在一个共享上下文里反复调用"视频裁剪"工具去主动找线索、看细节、自己决定何时收手，并用注意力解耦 + 轨迹奖励两项技术让这个多轮过程训得动、停得住。MLVU 72.1%、Video-Holmes 46.5%，均为 7B 量级 SOTA。Video-o3 把"主动找证据"这件事完整闭环了：范式上用共享上下文多轮工具调用替代解耦迭代（换来了效率与联合推理），训练上用注意力 mask 解决异质任务干扰、用轨迹奖励解决"准确定位 + 及时终止"这个 RL 中难以用语言描述的策
2026-09-13 11:15:50
304
原创 【VLM】InternVL3.5模型
InternVL3.5 用 Cascade RL 把"强化学习提推理"的性价比拉高了一档，用 ViR+DvD 把"高分辨率多模态"的推理成本砍到 1/4，同时把触角伸到 GUI、具身、SVG 等智能体能力上——是目前开源 MLLM 里通用能力最接近顶级商业模型的一个系列，但在幻觉抑制与部分理解类任务上仍有明确的改进空间。文章目录note一、研究动机：开源多模型的两道坎二、论文核心：三个创新点1. Cascade RL（级联强化学习）—— 核心贡献2. ViR + ViCO（视觉分辨率路由）——
2026-09-09 13:31:01
235
原创 【Unified VLM】InternVL-U: Democratizing Unified Multimodal Models
概括：用 4B 参数（2B MLLM + 1.7B 生成头 + 0.3B ViT）的统一模型，在生成/编辑上打平或超过 7B+7B 的 BAGEL、逼近 20B 级专用生成模型，同时保住 InternVL3.5 的理解底子——靠的是"解耦的架构接口"+“高语义密度数据合成”+"推理链（CoT）对齐意图"三板斧。Flow Matching 生成时依赖的 high-level semantic context，不再来自另一套独立的 text encoder / pipeline，而是来自统一 MLLM bac
2026-09-09 13:17:39
376
原创 【VLM】Reliable Reasoning in SVG-LLMs via Multi-Task Multi-Reward Reinforcement Learning
用 <g> 把 CoT step 和 SVG 代码块对应起来；构造 131K SFT + 14.4K RL 数据；Qwen3-VL-8B 做两阶段 SFT + 三任务联合 GRPO，并设计 format / DINO / CLIP / efficiency 四类 rewardCTRL-S 的价值不在"又加了个 RL"，而在于把结构化 CoT（步骤对齐 <g> 分组）+ 多任务联合 + 多奖励门控三件事拧成一个统一范式，让 SVG 生成同时拿到了更高成功率（99.85%/99.93%）、更强视觉保真（DIN
2026-09-09 11:36:30
224
原创 【Omni】OmniGAIA: Towards Native Omni-Modal AI Agents
OmniGAIA 填补了原生全模态 Agent 评测的空白，其事件图构造法可扩展至更多场景；OmniAtlas 证明了通过高质量轨迹合成 + Masked SFT + OmniDPO 能显著提升开源模型的工具集成推理能力，但感知底座与 Hard 任务推理仍是开放挑战。文章目录note一、研究动机：为什么需要 OmniGAIA？二、OmniGAIA 基准 + OmniAtlas 智能体2.1 OmniGAIA：如何构造“难而可解”的全模态任务？数据底座四阶段流水线（重点）2.2 OmniAtl
2026-09-05 19:44:24
383
1
原创 【全模态】Qwen3.5-Omni全模态Agent模型
整体骨干网络采用混合专家模型（MoE）设计，在提升可扩展性的同时，更好地平衡了多模态理解与生成中的容量与效率。思考者通过视觉编码器和 AuT 分别接收视觉和音频信号。音频与视频输入被交错排列，以实现统一的多模态建模，并插入明确的时间戳以提升时间感知能力，尤其适用于长视频或音视频上下文。该设计使思考者能够处理较长的输入，支持高达 256k token、10 小时音频或 400 秒 720P 分辨率每秒 1 帧的视频Talker 通过结合多模态输入以及 Thinker 的文本输出进行条件化，负责上下文相关的
2026-09-04 14:47:37
120
原创 【Agentic mRAG】MMAgent-R2: Learning to Rerank and Reject for Agentic mRAG
MMAgent-R² = 图搜 + VLM视觉重排 + 不确定时主动拒绝并继续检索 + 文搜 + Answer，再用 GRPO 对整条 Agent Loop 做训练，并额外给 Rerank/Reject step-level reward文章目录note一、研究动机：mRAG 在 KB-VQA 里的“识别瓶颈”二、论文核心：Agentic mRAG + 视觉重排/主动拒绝 + GRPO 步级奖励1. 智能体动作空间（单模型统一调度）2. 多轮 Agentic Loop3. 复合奖励 + GRP
2026-09-04 01:43:10
372
原创 【VLM】DiCoBench:多图细粒度感知Benchmark
一、DiCoBench论文：DiCoBench: Benchmarking Multi-Image Fine-Grained Perception via Differential and Commonality Visual CuesECCV 2026 ：DiCoBench动机：现有很多 VQA benchmark 的问题提示太明显，比如直接问“桌上的杯子是什么颜色”，模型知道该看哪里；但真实场景往往要求模型自己在多张图里找关键视觉线索。DiCoBench 就故意把这种提示减弱，测试模型真正
2026-09-01 11:39:30
221
原创 【Agent】Towards Long‑Horizon Agents: A Survey
VideoSeek Benchmark：Tool-augmented active perception in long video多模态理解侧重于如何在较长的时间跨度内定位有用信息，包括决定检查哪些片段以及调用哪些感知工具。Understanding → 主要吃 C1（H1）和 C2（H2）的亏，靠 Context/Memory 外化解决；多模态生成侧重于如何理解用户意图并进行多轮规划、生成与优化，这一过程依赖于外部证据、验证机制和持久记忆。Generation → 叠加不可逆副作用，靠 Pl
2026-08-31 00:09:24
445
原创 【LLM】GLM-5.3-Flash模型
GLM-5.3-Flash模型：320B总参数，19B激活参数。在编码和智能体评估方面，GLM-5.3-Flash 的表现接近 Claude Opus 4.8 的水平。基准上 MVBench 约 77.8，MMVU 约 80.5，属 Flash 级多模态视频理解可用水平，但不支持音频输入GLM-5.3-Flash 在多个方面进行了架构改进。首次引入了混合式架构，结合了稀疏注意力机制和线性注意力机制，从而显著降低了长上下文服务的成本，同时保留了精确的长上下文处理能力。此外，采用了 Manifold-Con
2026-08-30 23:14:49
241
原创 【VLM】多模态MoE模型Qwen3.8-Flash（125B总参数，激活6B，外挂51B N-gram Embedding）
多模态 MoE 模型，主模型参数量为125B，额外配备 51B 的 N-gram Embedding，每 token 激活 6B 参数。 它原生支持 262,144 token 上下文，并可通过 YaRN 扩展至 1M token。Attention：采用 GDN + QSA Hybrid 架构。Gated DeltaNet（GDN）高效压缩历史信息；Qwen Sparse Attention（QSA） 通过压缩式轻量 Indexer 在 micro-block 粒度上筛选重要上下文，显著降低长序列 At
2026-08-30 16:01:46
732
原创 【VLM】多模态情感分类-蒸馏小模型Light-MER
任务：生成式多模态情感识别（MER）——输入视频/人脸+语音+字幕，模型用自然语言说出情绪状态（如 “nervous, concerned” 或 “neutral”）。输出的结果比如The character's emotional state is nervous, concerned.。Light-MER 的蒸馏：从 logits 移到 hidden states（最后一层）、从 KL/MSE 换成 Sliced Wasserstein Distance（SWD）工作：用一个 0.6B 的多模态小模
2026-08-30 15:30:29
227
原创 【CLIP】Modality Alignment across Trees on Heterogeneous Hyperbolic Manifolds
这篇论文的本质贡献是：把“图像=一个点”这个 CLIP 时代隐含假设打破，用 ViT 中间层+文本 cross-attention 让图像也长成一棵层级树，再把图文两棵树分别放进不同曲率的双曲空间，通过可证明唯一的最优中间双曲流形完成几何对齐，从而在分类学开集任务上把层级一致准确率（HCA）拉高近 29 个点。构建视觉树核心是利用 ViT 不同层的 CLS token 作为“多粒度视觉候选特征”，再通过文本层级引导的 Cross-Attention，把它们融合成一组 coarse-to-fine 的视觉
2026-08-29 22:35:26
354
原创 【NeurIPS 2025】Beyond the Seen: Bounded Distribution Estimation for Open-Vocabulary Learning
用生成模型主动补齐“没见过的数据分布”：先“猜”未来可能出现的 unseen class → 用扩散模型生成这些类别的伪图片 → 再让这些 synthetic unseen data 参与 CLIP Prompt Learning。它本质上是一个“LLM/VLM + Diffusion 合成 unseen 数据 → 提升 CLIP 开放词汇泛化”的工作，而不是一个新的大模型架构这篇论文的增量不在"用扩散模型造数据"本身，而在先把’OVL 分布估计误差不可界’这件事写成定理，再反推’生成什么数据、怎么对齐
2026-08-29 18:58:26
36
原创 【ICML2026】Video-DeepResearch
Video-DeepResearch（arXiv:2608.03979）把“Deep Research”从文本/静态图推到连续视频流 + 开放网页检索的场景，核心不是堆参数，而是用训练范式和评测设计逼模型先“看视频”、再“搜网页”。这篇的价值不在 SOTA 数字，而在把“视频里的 deep research”定义成先时序 grounding 再网页验证的强制闭环，并给出可复现的数据-训练-评测三件套。30B 打平 Claude-4.5 这点，基本宣告视频 agent 方向“训法 > 参数量”的范式切换。
2026-08-29 18:08:46
52
原创 【VLM-Agent】DeepSeek-V4-Flash-Vision-Exp和DeepSeek-V4.1-Flash模型
DeepSeek-V4-Flash + 原生“看图”能力 + Tool Calling，重点面向多模态 Agentex：图片/截图 → V4 Flash Vision → 视觉理解 + Reasoning → Function Call → 搜索/Crop/浏览器/代码等工具 → 最终回答多模态视觉理解模型 DeepSeek-V4-Flash-Vision-Exp 上线 DeepSeek API 平台model=‘deepseek-v4-flash-vision-exp’文章目录note一、De
2026-08-26 15:09:24
166
Python思维导图.rar
2020-05-10
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人