信创模盒 ModelHub XC|高效适配最新国产全模态文字识别模型 DeepSeek-OCR

近日,范式信创模盒 ModelHub XC宣布,完成对最新国产全模态文字识别模型DeepSeek-OCR在信创算力卡上的适配测试,成为业内首批实现该创新OCR技术高效部署的平台。基于前期推出的面向信创算力的AI引擎体系EngineX的大模型推理框架,DeepSeek-OCR目前已经可以成功在昇腾、沐曦等芯片上稳定运行。

知识点预置

向上滑动阅览对话

大语言模型是什么?

像一个“饱读诗书的智者”,它能与你对话、创作和推理

OCR是什么?

像一位“专业的文字翻译官”,专攻将图片中的文字“认”出来,变成可编辑的文本

技术突破 DeepSeek-OCR的全新价值

近日,DeepSeek团队提出一种创新的OCR算法——DeepSeek-OCR,探索利用视觉模态作为高效压缩文本信息的新路径。核心在于借助视觉token对长文本上下文进行压缩,从而实现高效的光学字符识别(OCR)功能。该模型会将文本转化为二维图像形式,且在解码环节维持高识别精度,被业界普遍认为是破解大语言模型(LLM)长上下文效率难题的潜在关键突破。

攻坚克难 ModelHub XC平台的技术突破之路

为拓宽模型服务生态,ModelHub XC成功完成DeepSeek-OCR在信创算力计算环境的适配,测试验证能够稳定运行且输出效果无损,与NVIDIA输出效果一致,性能与NVIDIA H100差距在30%以内。

本次适配延续了平台已有的EngineX体系技术路线,通过“架构级适配”的技术路线实现对模型的支持。通过在EngineX引擎层完成对transformer算法架构的适配支持,能够最终完成对同一架构下多个大模型的批量化支持。在此基础上,DeepSeek-ORC的算法核心架构基于Transformer架构的模型,即可在国产信创算力平台上实现即插即用的高效推理与训练部署。

目前,社区已经将最新的支持 DeepSeek-ORC 模型的 EngineX 源代码发布,后续社区将会在更多的信创芯片上实现该模型的适配和优化。

链接:https://modelhub.org.cn/#/model/modeDetail?id=811

关于信创模盒 ModelHub XC

信创模盒 ModelHub XC 是面向信创算力生态的 AI 模型与工具社区,致力于推动国产硬件平台上的人工智能创新与落地,提供涵盖模型训练、推理到部署的全流程解决方案。

作为业内优质的国产化模型和算力开源社区,ModelHub始终致力于大小模型的统一管理与部署,除了提供丰富的大模型推理引擎支持以外,还对小模型(如asr、tts、ocr等)进行了深入支持,并提供了规范的小模型统一推理框架,使得小模型部署和调用进一步规范化、流程。此次DeepSeek-OCR的快速高效适配,再次证明了ModelHub平台在技术创新和服务能力上的高效优势,为用户提供了前沿的文本处理解决方案,助力企业在信息处理效率上实现新的飞跃。

---·END·---

关注范式官方账号

获取更多AI前沿洞察与产业实践案例

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值