自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(57)
  • 收藏
  • 关注

原创 A2UI 协议深度调研分析报告-AI分析

A2UI(Agent-to-UI,"智能体到界面")是 Google 于 2025 年 12 月公开的一个开源、声明式(Declarative)的 Agent 驱动界面协议。它解决的核心问题是:当 AI Agent(尤其是运行在远端、跨信任边界的 Agent)需要向用户展示比纯文本更丰富的交互界面时,如何在安全与原生体验之间取得平衡。A2UI 的核心思路是——Agent 不生成可执行代码(HTML/JS),也不生成预制 iframe 模板,而是生成一段结构化 JSON,描述"我想要一个什么样的界面";

2026-06-23 14:02:51 263

原创 DGX-spark上成功部署Voxtral-Mini-4B-Realtime-2602支持realtime ws接口

模型接口类型是否真实时vLLM 支持状态WebSocket✅ 原生流式Day 0 支持(2026.02)Qwen3-ASRHTTP❌ 不支持ws流式2026.02 已合并Whisper 系列HTTP❌ 批量处理稳定支持HTTP (vllm-asr 扩展)❌ 长音频单遍需额外工具。

2026-05-21 15:39:17 501

原创 Windows 上通过 WSL2 部署 Qwen3-ASR-0.6B - AI

因C盘空间不足,未完成验证。

2026-05-12 19:18:03 306

原创 关于 ASR 实时推理与部署的深度调研报告-AI分析

以下是关于的深度调研报告,覆盖架构选型、工程优化、服务框架到延迟基准的全链路分析。

2026-05-11 11:04:22 365

原创 NVIDIA NeMo Guardrails 度技术调研报告-AI分析

NVIDIA NeMoGuardrails技术报告摘要(2026) NeMoGuardrails已从开源框架演进为企业级AI安全平台,提供五层护栏机制(输入/对话/检索/执行/输出)和Colang领域专用语言。核心优势包括: 深度整合NVIDIA生态(NIM微服务/Nemotron模型/GPU加速) 业界领先的对话流管控能力 支持多智能体安全编排 技术亮点: 并行护栏引擎将延迟控制在50-150ms(GPU环境) 内置23类内容安全检测和24种越狱攻击防护 兼容主流LLM提供商和第三方安全平台

2026-05-09 13:53:57 517

原创 NVIDIA VSSVideo Search and Summarization视频搜索与摘要蓝图详尽使用说明与技术报告版本

NVIDIA VSS视频搜索与摘要系统技术摘要 NVIDIA VSS(Video Search and Summarization)是基于NVIDIA Metropolis平台的AI视频分析解决方案,最新版本为VSS2.4(2026年4月)。该系统融合生成式AI、视觉语言模型(VLM)和大语言模型(LLM)技术,提供以下核心功能: 核心技术 视频摘要速度比人工快100倍,1小时视频可在1分钟内完成摘要 支持数百路实时视频流并发处理 采用分层架构:实时视频智能层、下游分析层和Agent离线处理层 核心组件包括

2026-04-29 13:38:00 589

原创 NVIDIA的 Cosmos-Embed1-448p 终于在 DGX Spark 上部署成功

摘要:本文详细介绍了在NVIDIA DGXSpark(GB10,aarch64)平台上成功部署Cosmos-Embed1-448p模型容器的完整流程。关键步骤包括:配置NGC API Key、拉取nvcr.io/nvidia/vss-core/vss-rt-embed:3.1.0镜像、安装DeepStream 7.1依赖库、提取容器内关键文件并设置持久化存储。部署时需注意显存占用约15-20GB(加载时达30GB),并通过环境变量IS_SBSA=1和--disable-decoding参数适配ARM架构。成

2026-04-28 13:21:03 352

原创 云计算与大模型私有化部署详解

维度公有云私有云数据所有权云厂商管理企业自主掌控安全隔离性共享环境,风险相对高物理隔离,安全性强初期成本低(按需付费)高(需购置硬件)运维责任云厂商负责企业自行负责弹性扩展极强受硬件限制合规适配较难满足强监管要求易于满足监管要求典型客户中小企业、互联网公司政府、金融、大型企业大模型私有化部署,是指企业将 AI 大语言模型(LLM)的完整推理服务部署在自己可控的服务器/环境中运行,而不是调用 OpenAI、Claude、文心一言等厂商的公共 API 接口。

2026-04-22 19:13:48 845

原创 多模态模型bg-digitalservices/Gemma-4-26B-A4B-it-NVFP4和zlab-princeton/Vero-Qwen3T-8B的深度对比分析报告

Vero-Qwen3T-8B 在 30 个视觉推理基准测试中,以 Qwen3-VL-8B-Instruct 为起点超越了 Qwen3-VL-8B-Thinking(在 23/30 基准上更优),代表了开放 RL 训练方法的重大突破。HuggingFace Collection:zlab-princeton/vero(含 Vero-Qwen25-7B、Vero-Qwen3I-8B、Vero-Qwen3T-8B、Vero-MiMo-7B 四款模型)

2026-04-17 09:44:46 527

原创 各种类的模型OpenAI格式

OpenAI本身没有Rerank端点服务商端点特点Cohere业界最常见的参考格式Jina AI兼容Cohere格式智谱、硅基流动各自定义大体类似// 请求"query": "什么是机器学习","documents": ["文档1内容", "文档2内容", "文档3内容"],"top_n": 3// 响应模型类型OpenAI标准端点标准化程度备注Chat/LLM⭐⭐⭐⭐⭐最完善的事实标准Embedding⭐⭐⭐⭐⭐高度统一ASR⭐⭐⭐⭐Whisper格式广泛兼容。

2026-04-13 09:45:55 333

原创 OCR 模型深度对比分析报告 - AI分析

本报告对比分析了2026年开源OCR领域三大前沿模型:GLM-OCR、DeepSeek-OCR-2和PaddleOCR-VL-1.5。三款模型在OmniDocBenchv1.5基准测试中表现优异,GLM-OCR以94.62%准确率领先,PaddleOCR-VL-1.5以94.50%紧随其后,DeepSeek-OCR-2获91.09%。模型设计各有侧重:GLM-OCR注重轻量高效(0.9B参数),PaddleOCR-VL-1.5强化真实场景适应性,DeepSeek-OCR-2则采用创新的3B参数视觉因果流架构

2026-04-10 09:38:25 901

原创 Gemma-4-31B-it 在 DGX Spark 上的性能测试结果

对于交互式和 Agentic 工作负载,26B-A4B MoE 是 DGX Spark 上的明确赢家:最快解码速度(23.7 t/s)、长上下文下最佳 Prompt 处理速度(pp2048 达 3105 t/s)、首次响应时间也具有竞争力。LPDDR5X 统一内存架构在限制 dense 模型的同时,反而有利于 MoE 设计——每个 Token 只需流式读取 4B 激活参数。⚠️注意。

2026-04-08 11:27:32 1132

原创 在DGX-Spark上多模态模型gemma-4-31B-it vLLM部署

显存优化fp8量化 + 70% 显存限制 + 分块预填充,适合大模型部署性能优化:前缀缓存 + SafeTensors 格式,提升重复查询和加载速度功能特性:支持工具调用(Tool Calling)和思维链解析,适配 Gemma 4 原生能力长上下文:26万 token 支持,适合长文档处理。

2026-04-07 16:18:22 2217

原创 HARNESS 深度分析报告 -AI分析

这是 Harness AI 战略的核心基础设施——一个持续更新的智能层,捕获并连接 SDLC 每个阶段的数据:构建、测试、部署、故障、基础设施变更和云成本。Harness 的创立初衷明确:软件交付流程过于复杂,开发者每年花费超过40%的时间在非核心代码工作上(如维护 Jenkins 脚本、处理部署失败等),由此造成超过万亿美元的效率损耗。面向金融、医疗、政府等强监管行业,Harness 内置的 OPA 策略引擎、部署审批门控、部署冻结、完整审计日志等合规特性,是轻量级工具难以替代的。

2026-04-03 10:09:56 921

原创 Claude Code 深度技术研究报告 - AI 分析分享

2026年3月31日,Anthropic 发布 @anthropic-ai/claude-code v2.1.88 时,意外将 59.8MB 的 JavaScript Source Map 文件(cli.js.map)包含在 npm 包中,导致约 512,000 行 TypeScript 源代码完全公开。行动前必须将内存与实际代码核对,减少幻觉。这是 Anthropic 的第二次源码泄漏:仅5天前(3月26日),CMS 配置错误曾暴露过未发布的「Claude Mythos」模型信息及3000个未发布资产。

2026-04-01 10:48:42 740

原创 SourceTree实用操作手册

《SourceTree实用操作手册》是一份针对Git图形化客户端SourceTree的详细指南,适用于Windows和macOS平台。手册涵盖安装配置、日常操作、分支管理、冲突解决等核心功能,特别适合Git初学者和团队开发者使用。主要内容包括:SSH密钥配置、提交流程、GitFlow工作流、冲突处理技巧、Stash暂存、撤销操作等实用功能,同时提供多仓库管理方案和团队协作最佳实践。手册还包含常用快捷键速查和命令行对照表,帮助用户快速掌握这款可视化Git工具,提升版本控制效率。

2026-03-31 15:21:25 669

原创 BPMN.io全方位深度分析报告架构解析 - AI分析分享

Camunda(bpmn.io 母公司)在 OMG 标准委员会深度参与 BPMN/DMN/FEEL 标准的修订,Falko Menge 担任 DMN/FEEL 标准委员会主席,Nico Rehwaldt 参与 FEEL 表达式语言 TCK(技术兼容套件)开发。核心定位:BPMN.io 不是一款独立的 SaaS 产品,而是一个「工具包生态」——它提供的是构建流程建模应用的砖石与脚手架,Camunda Modeler、Camunda Web Modeler 等产品本身就是基于 bpmn.io 工具包构建的。

2026-03-25 10:03:03 404

原创 2026年AI Agent四大技术突破解析

本报告聚焦与三重约束。

2026-03-19 22:48:27 1402

原创 Clawith 大模型设计逻辑与前端接口架构分析 -AI分析

Clawith 是 DataElem 基于其企业 AI 平台BISHENG积累的工程经验,专门为 OpenClaw 多智能体场景重新设计的团队协作平台。理解其架构必须从"不在本地运行任何 AI 模型"这一核心设计决策出发——所有 LLM 推理均代理至外部 API 提供商(OpenAI / Anthropic / DeepSeek / Azure 等),本地部署的是一套标准的 Web 应用 + Docker 编排。│ 用户层 │。

2026-03-18 14:24:30 491

原创 Clawith 深度分析报告 - AI分析分享

它凭借"本地运行、真正执行任务"的定位,在 2026 年 1 月病毒式爆发,72 小时内收获 60,000+ Stars,最终以不足 4 个月时间超越 React(13 年积累 243k Stars),登顶 GitHub 软件项目榜首,成为开源历史上增速最快的项目。Clawith 的"数字员工"范式有望成为企业 AI 转型的标准路径之一,与 MCP 协议、企业知识图谱深度融合,重塑传统 SaaS 软件格局。(将组织知识沉淀自动化)。(开源标准化)——持续扩大社区,成为企业多智能体领域的"开源标准";

2026-03-17 10:52:01 1792

原创 Agent 应该中 PDF 工具方案分析报告 - AI分析分享

选型核心问题有三个维度:第一,Agent 的 PDF 任务频率与复杂度。低频、简单文档(如摘要报告)用 AI 原生工具或云 API 即可;高频、复杂布局(如财务报表、法律合同)应选 ReportLab 或 DocRaptor。第二,是否需要 JavaScript 渲染。如果 PDF 内容来自动态 Web 页面或包含图表库,应选择 Playwright(活跃维护、多浏览器支持)而非 PDFKit(其底层 wkhtmltopdf 已停止维护,CSS 冻结在旧版)。第三,合规与数据安全。

2026-03-15 23:37:49 522

原创 LiteLLM 开源多模型调用框架深度分析报告 - AI分析分享

LiteLLM 是由 BerriAI 开源的,目标是用一套统一的 OpenAI 兼容接口调用 100+ LLM Provider(OpenAI、Anthropic、Bedrock、Vertex AI、Azure、Groq、Cohere 等),同时提供成本追踪、负载均衡、故障回退、Guardrails 等企业级能力。核心价值主张:统一接口:无论底层 Provider 如何变化,业务代码不变,只换model字符串多模态全覆盖:文本、图像、音频、视频、向量、重排序,一个框架全包生产就绪。

2026-03-12 13:09:34 847

原创 多模态模型调用方式深度分析报告 - AI分析分享

多模态模型指能够处理和生成两种以上数据模态(文本、图像、音频、视频等)的 AI 模型。输入多模态(Multimodal Input):模型可以理解多种格式的输入,如同时接受文字和图片描述一张照片输出多模态(Multimodal Output):模型可以生成多种格式的内容,如根据文字同时生成图片和说明文字核心结论:多模态调用既不是"只用一个接口",也不是"完全分开",而是分层的混合策略。第一层:理解接口趋于统一。文本理解、图像理解、文档分析、视频分析、ASR 正在向统一对话接口收敛。Gemini 的。

2026-03-12 10:47:43 501

原创 PicoClaw 深度分析报告 - AI分析分享

运行在 $10–50 嵌入式 Linux 板卡上(LicheeRV Nano、树莓派 Zero)内存严格受限(<64MB 可用 RAM)需要 RISC-V 架构支持家庭自动化/IoT 项目,要求低功耗、低成本、7×24 运行旧 Android 手机改造 AI 助手国内用户需要 QQ/DingTalk 集成且偏好 GLM 系列模型希望快速上手(2 分钟内运行起来)

2026-03-05 23:59:21 841

原创 ZeroClaw 深度分析报告-AI分析分享

ZeroClaw 诞生于 2026 年 2 月中旬,是在 OpenClaw(前身为 Clawdbot → Moltbot → OpenClaw)爆红之后出现的 Rust 原生重写版本。OpenClaw 在短短六周内斩获 215,000+ GitHub Star,催生了整个 "Claw 生态系",ZeroClaw 就是其中技术上最激进的一个分支。不是 OpenClaw 的功能复刻,而是对 AI Agent 基础设施的根本性重新设计。官方将其描述为"Agentic Workflows 的运行时操作系统"。

2026-03-05 23:43:45 1526

原创 LiteLLM 核心价值深度分析 - AI分析分享

用一套 OpenAI 风格的输入/输出和同一套代码,统一接入 100+ 家模型供应商,并在此基础上提供路由、降级、鉴权、计费等「网关层」能力。官方文档和本仓库中的 Proxy 代码都围绕这一点展开。

2026-03-05 10:59:22 475

原创 uvloop 是什么?

uvloop 就是给 asyncio 换一个更快的引擎,Linux/Mac 服务器部署首选,Windows 开发环境用 winloop 替代即可。(Node.js 底层也用这个库)实现,用 Cython 编写,性能比默认的 asyncio 事件循环快。原因是 libuv 虽然本身跨平台,但 uvloop 的实现深度依赖了。,在高并发网络 IO 场景下效果尤为明显。),这些在 Windows 上不存在。,用来替换 Python 标准库。在 Windows 上。uvloop 是一个。

2026-02-28 13:36:55 179

原创 DGX-spark-GB10 120GB显存的机器,为什么部署Qwen3-14B生成速率才13tokens/s

摘要:Qwen3-14B Q8_0模型13t/s的速度属于正常范围,主要受限于DGXSpark的显存带宽(~273GB/s)。Dense架构大模型在推理阶段是内存带宽受限,而非算力受限。提升方案包括:1)改用Q4_K_M量化(速度可提升至25~30t/s);2)开启FlashAttention;3)减少context长度;4)调整batch-size;5)改用MoE架构模型(如Qwen3-30B MoE可达89t/s)。测试数据显示,32B Dense模型速度约10.7t/s,而30B MoE可达89.3t

2026-02-28 10:25:50 946

原创 llama.cpp 部署 Qwen3-14B-Claude-4.5-Opus-High-Reasoning-Distill-GGUF

本文对比了三种部署Qwen3-14B-Claude-4.5-Opus-High-Reasoning-Distill-GGUF模型的方法:1)Ollama最简单但推理性能中等;2)llama.cpp性能最强但需编译配置;3)LMStudio/OpenWebUI提供图形界面但功能有限。重点详细说明了前两种方法:Ollama通过四步完成部署并测试API接口,llama.cpp需要源码编译并支持40K长上下文(需28GB显存),提供了完整的部署命令和参数说明。文章还包含模型响应示例、思考模式控制方法、工具调用演示,

2026-02-27 19:34:14 1047

原创 LiteLLM 深度全面分析-AI分析分享

LiteLLM 是由 BerriAI 开发的开源项目(MIT 协议,GitHub 已超过 28,000 星),核心使命是通过统一的 OpenAI 格式接口,接入 100+ 家 LLM 提供商,让开发者无需面对各厂商 API 的差异性,同时提供完整的企业级管控能力。用一句话概括:LiteLLM = 统一 LLM 入口 + 智能路由 + 成本治理 + 可观测性。生产用例包括 Netflix、Lemonade、Rocket Money 等企业。LiteLLM 是目前企业自托管 LLM 网关的最优选择之一。

2026-02-26 10:12:27 1894

原创 OpenClaw · PicoClaw · ZeroClaw-自主 AI Agent 框架深度分析报告-AI分析分享

OpenClaw、PicoClaw 和 ZeroClaw 是其中最具代表性的三款,它们在架构哲学、技术栈、目标硬件和安全模型上各有侧重,共同构成了当前开源 Agent 基础设施的核心图谱。OpenClaw 的品牌影响力与生态深度,ZeroClaw 的工程质量与安全默认配置,PicoClaw 的极端硬件覆盖,三者的互补性高于竞争性,有望形成参考生态链而非零和竞争。在 GDPR、CCPA 等数据隐私法规持续收紧,以及企业对数据主权要求提升的背景下,本地 Agent 框架的价值将持续凸显。

2026-02-25 13:34:54 1772

原创 OpenClaw 全面现状分析报告(2026年2月24日)- AI分析分享

OpenClaw 是 2026 年初 AI 领域最轰动的现象级开源项目之一,其发展速度之快,令整个科技行业瞠目结舌。项目起源于 2025 年 11 月,初名 Clawdbot,诞生于"WhatsApp Relay"周末黑客项目,随后爆发式增长至 10 万 GitHub Star,单周吸引 200 万访客。2026 年 1 月 27 日,因 Anthropic 发起商标投诉,项目被迫改名为"Moltbot";

2026-02-24 15:29:18 1877

原创 2026年2月人工智能技术深度分析报告-AI分析分享

本报告基于对全球主要科技公司、研究机构和行业分析的深入调研,揭示了五大核心技术趋势正在重塑AI产业格局:推理模型的效率革命、世界模型的崛起、自主AI代理的规模化部署、量子计算与AI的深度融合,以及从模型规模竞赛向应用价值的战略转型。2026年,AI产业正在经历从青春期的冲动走向成年期的成熟——这个转变将决定AI技术在未来十年的发展轨迹和社会影响。五大核心趋势——推理模型的效率革命、世界模型的崛起、自主AI代理的企业级部署、量子计算与AI的协同,以及从炒作到务实的产业成熟——共同描绘了AI技术发展的新图景。

2026-02-13 00:00:01 1016

原创 深度分析:多模态、全模态、VLM、ASR、TTS、STT、OCR- AI分析分享

摘要:本文详细解析了2025年多模态AI模型的核心概念与区别。多模态模型(MLLM)处理多种输入但输出单一模态,而全模态系统支持完整的输入输出能力。重点比较了VLM(视觉语言模型)、ASR/STT(语音识别)、TTS(语音合成)和OCR(文本识别)的技术特点与API调用差异。最新趋势显示端到端整合模型正在取代传统级联方案,如GLM-4-VOICE实现了语音直接理解生成。文章提供了完整的技术栈示例,并指出应根据具体场景选择模型组合,全模态模型如GPT-4o正逐步统一这些能力。

2026-02-05 14:00:27 1194

原创 GitHub 2026年AI项目详细数据汇总表-AI分析-分享

2026年2月4日。

2026-02-04 12:10:59 1629

原创 GitHub 2026年AI项目热度分析报告-AI分析-分享

2026年开源AI生态迎来转折点。个人化AI代理- 由用户自主部署和控制本地优先架构- 打破云服务垄断智能工程工具- 将AI融入开发工作流这标志着AI从实验阶段进入生产化、民主化的新时代。

2026-02-04 12:09:31 2202

原创 2026年最优AI模型深度分析与选择建议- AI分析

新的TOP 6排序Qwen3-Max-Thinking ✅ (新晋王者)GPT-5.2(仍是推理极限)Claude Opus 4.5(编程最强)Gemini 3 Pro(多模态最强)DeepSeek R1(开源最强)Qwen3-Max-Preview(速度版本)核心建议国内用户:Qwen3-Max-Thinking已是首选,无需纠结GPT全球用户:值得尝试,性价比意外惊人成本控制:DeepSeek R1完全开源免费

2026-01-30 10:51:19 2189

原创 WorldModel:AI下一代革命 - 深度分析报告-AI分析

WorldModel是一种AI系统,它可以理解物理世界的基本原理,并在内部构建对环境的压缩表示,用于预测环境如何演变以及智能体的行动如何影响环境。形成对世界因果关系的理解能够进行模拟和预测(想象未来)支持规划和推理的决策理解物理常识(如重力、物体碰撞等)学习空间-时间动态表示。

2026-01-29 11:31:04 927

原创 国内外AI Agent产业全景分析报告 - (AI分析)

维度国外(美国)国内(中国)基础模型OpenAI、Google、Anthropic领先DeepSeek逆袭,通义、豆包、文心并进云基础设施AWS、Azure、GCP完善阿里云、腾讯云、火山引擎快速进步企业应用Microsoft垄断,Salesforce、Oracle补充多企业平行发展,缺乏统一标准垂直应用国防、科研、金融领先金融、通信、制造快速追赶开源生态成熟完善快速发展中芯片自给英伟达垄断,Google TPU/Microsoft MAI-1补充DeepSeek自研,华为芯片追赶安全隐患。

2026-01-29 10:51:58 2096

原创 uvicorn 与 uvicorn[standard] 的安装说明

摘要:安装Uvicorn时,推荐使用pip install "uvicorn[standard]"以获得完整功能,包括WebSocket支持、自动重载和高性能事件循环。仅安装核心版(pip install uvicorn)适用于快速测试,但缺少关键功能。标准版对FastAPI开发和生产环境至关重要,能显著提升性能并支持WebSocket。除非在资源极度受限的环境,否则都应选择标准安装。可通过python -c "import websockets"等命令验证安装是否完

2026-01-28 17:37:33 485

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除