• 博客(169)
  • 收藏
  • 关注

原创 「首度揭秘」大规模HPC生产环境 IO 特征

在王坚博士的《在线》一书中提到,单纯谈数据的“大”,意义是不大的。欧洲核子研究中心(CERN)进行一次原子对撞产生的数据大到惊人,而如何通过计算的方式去挖掘出这些数据背后的价值,才是数据意义的本身。HPC高性能计算,就是完成这种价值转换的重要手段。近年来,HPC的应用范围已经从纯学术扩展到资源勘探、气象预测、流体力学分析、计算机辅助设计等更多场景。这些HPC应用程序会产生或依赖大量数据,并将其存储在PB级别的共享的高性能文件系统中。然而,无论是HPC应用的用户,还是高性能文件系统的开发人员,对这些文件的访问

2020-05-22 16:47:52 3171

原创 如何评估Kubernetes持久化存储方案

在2018年的Garnter技术成熟度曲线中,容器存储出现在了技术触发期,已经开始进入大众的视野。我相信,在未来的两年内,容器存储会随着Kubernetes的进一步成熟和商业化,其地位会越来越重要。如何在五花八门的存储产品中,选择适合自己的一款,将会是IT大佬们必须要面对的问题。本次分享将会从使用场景角度分析,如何评估容器存储方案。五花八门的存储概念从用户角度看,存储就是一块盘或者一个目录...

2019-01-21 15:16:36 1513

原创 性能持续领航 全闪存储新品焱融追光 F9000X 震撼发布

近日,焱融科技宣布推出全新升级的企业级全闪分布式存储一体机追光 F9000X。该产品与国际顶级技术厂商 Intel、 NVIDIA 深度合作,是国内首款支持 NVIDIA NDR 400 InfiniBand / 400GbERoCE网络的文件存储产品。F9000X 以其卓越性能,稳居行业领先地位,重新定义了企业级存储的性能边界。

2024-09-06 19:28:31 404

原创 YRCloudFile V6.13.0 发布| 新增弹性数据网络(Elastic Data Network)功能

近日,焱融科技发布了分布式文件存储产品 YRCloudFile V6.13.0 版本。在该版本中,YRCloudFile 新增弹性数据网络(Elastic Data Network)功能,实现了在单一存储集群内无缝支持多种存储访问网络类型,满足企业用户多样化的业务数据通讯需求,使产品组网具有更好的灵活性和适用性。

2024-08-21 11:17:33 671

原创 焱融科技助力武昌智算中心建设 全面激活新质生产力

武汉市中心城区布局建设首个智算中心——武昌智算中心,采用目前最先进的 GPU 算力技术架构。焱融科技以先进的高性能存储技术方案精准匹配武昌智算中心的 GPU 算力需求,为算力资源的高效应用保驾护航,助推人工智能、云计算与大数据等前沿技术赋能千行万业,开启智慧变革新篇章。

2024-08-13 10:22:27 288

原创 焱融全闪存储助力视源垂直大模型训练效率提升 6 倍

近日,焱融科技为视源中央研究院构建了先进的 AI 基础设施,解决了该研究院在垂直大型模型训练中遇到的存储性能限制,使得垂直大模型的训练效率提升了6倍。这一进步显著加快了该大模型在多场景中的部署速度,从而为用户提供了卓越的产品体验。

2024-08-01 19:42:10 916

原创 焱融科技发布国产化全闪新品 F8000XC

近日,焱融科技推出了基于鲲鹏底座的国产化全闪存储一体机 F8000XC,专为国产化环境设计,实现全面自主可控,为 AI 智能计算、HPC、大规模国产化云环境提供高效、安全、可靠的存储基础架构支撑。

2024-07-26 11:52:15 285

原创 增速迅猛| 焱融科技跻身中国文件存储市场份额排名报告

焱融科技跻身《中国季度软件定义存储市场跟踪报告 2024Q1》,在SDS整体市场和文件存储细分领域增速均超市场平均水平。

2024-07-12 15:51:26 350

原创 焱融科技完成双轮融资 新一代高性能文件存储独树一帜

焱融科技完成 B 轮和 B+ 轮融资,累计融资额近 2 亿元人民币。两轮融资分别由丰年资本和北京股权领投,老股东耀途资本、卓源亚洲、信雅达等知名投资机构持续跟投。

2024-07-05 09:05:26 747

原创 焱融科技参编国内首个高性能计算存储标准

近日,中国电子工业标准化技术协会发布公告,批准 T/CESA 1312-2024《高性能计算分布式存储系统技术要求》等十项团体标准(以下简称“团标”)。该标准是由曙光信息、中移动、焱融科技等国内存储厂商及使用单位携手发起并精心编制,对推动高性能计算领域的标准化、规范化发展具有重要影响。

2024-06-13 18:58:33 280

原创 吞吐量10倍提升!分布式文件系统性能优化创新方案

焱融带大家一起深入探讨“Combining Buffered I/O and Direct I/O in Distributed File Systems”研究论文中,针对分布式文件系统 I/O 性能瓶颈提出的高效优化策略——AutoIO。

2024-06-13 18:43:31 878

原创 测试加速器丨探索 vSphere API 在自动化测试的应用可能

由于 govc 通过 Govmomi 实现了大部分 vSphere API usages,基于 Govmomi 进行自动化测试的开发,当需要实现 govc 已有的功能时,可以参考 govc 源码,查看对应的 CLI 命令实现方式,作为自行封装的参考。首先要提到的是,该系统是基于 VMware 的自动化测试平台,通过结合规范化配置与自动化流程,将不同配置需求的虚拟机存入系统,利用编写好的自动化流程实现一键配置+安装虚拟机,从而迅速为不同的测试需求提供快速部署的测试环境。今天,我们就一起聊一聊。

2024-06-06 19:01:23 707

原创 焱融全闪鼎力支撑千卡级智算中心项目落地

近日,焱融科技全闪存储鼎力支撑粤港澳大湾区一家智算中心打造千卡级智算平台。该平台融合了高性能算力、超高速网络以及卓越的存储能力,全方位满足用户的多元化算力需求,迎接算力市场的各种机遇和挑战。

2024-06-06 18:49:46 344

原创 性能突破|海量客户端场景 Quota 和 QoS 的优化之路

在数字化转型的浪潮中,满足不断增长的用户需求对存储资源管理和访问质量保障(QoS)提出了巨大挑战。特别是在海量客户端场景下,如何通过 Quota 管理和 QoS 策略实现资源和性能的有效隔离,以提供流畅、可靠的用户体验,成为了关键所在。

2024-05-31 17:09:47 841

原创 共筑产业生态丨焱融科技加入长三角人工智能生态联盟

面对全球 AI 技术的迅猛发展和算力基础设施需求的迅猛增长,焱融科技凭借在高性能 AI 存储领域的技术实力,前瞻性地部署了全场景 AI 系列产品,为 AI 智算及各行业客户提供卓越的 AI 存储解决方案。“方原会”长三角人工智能生态联盟由长三角科技产业股权投资机构国方创新和人工智能领域算力领军企业燧原科技共同发起,该联盟将共同围绕通用人工智能产业,促进产业链上下游厂商之间的交流与合作,共同推动产业生态能级跃升。5 月 24 日,在长三角科技产业投资生态联盟论坛上,“方原会”长三角人工智能生态联盟正式成立。

2024-05-30 18:46:32 225

原创 焱融科技以先进存力助推 12000P 智算平台建设

焱融存储智算案例

2024-05-28 18:20:06 407

原创 训练效率提升 40%丨多云架构下高效存储策略详解

破题大模型算力荒,如何打造高性能存储底盘?

2024-05-27 18:32:45 1128

原创 任务分级技术:突破数据分层/加载场景下性能瓶颈

如果使用高性能的对象存储服务,网络带宽足够,那么读写一个1MB的文件应该非常快,可能只需要几毫秒的时间,这个延迟可以满足基本上大多数的业务。在另外一些情况下,一套 YRCloudFile 集群往往会对接多个对象存储,对象存储之间的规格差异(包括存储介质、网络质量、节点配置等)往往会导致明显的 IO 延迟差异,且对于并发的容忍度也会有很大的差异。未来,我们将持续致力于分布式集群性能问题的深入研究和优化工作,不断推动技术创新,为用户提供更高效、更稳定的分布式集群服务,满足不断增长的业务需求。

2024-05-24 10:39:36 358

原创 丰富企业 AI 存储选择丨焱融科技与安擎完成兼容性互认证

近日,焱融科技与安擎携手完成了产品兼容性互认证,双方产品完美的技术融合,为各类人工智能应用提供了坚实的硬件和软件基础。这不仅开启了双方合作的新篇章,也为用户提供了更为丰富和优化的产品选择。

2024-05-22 16:17:43 314

原创 AI 新质生产力创新先锋 焱融科技入选中国生成式AI企业TOP50

日前,2024 中国生成式 AI 大会发布「AI生产力创新先锋(AiiP)-中国生成式AI企业TOP50」,旨在聚焦中国生成式 AI 浪潮中敢为人先的先锋企业。焱融科技凭借在人工智能领域的突破性创新和完善的产品服务生态,荣登中国生成式 AI 企业TOP50榜单。

2024-05-21 15:48:33 409

原创 媒体聚焦 | 全闪存储加速大模型训练,获业界共识

自2022年底ChatGPT发布,大模型一直是技术趋势热点。据爱分析调研,截至2023年9月,国产大模型数量已超百个,落地场景包含金融、能源、政务、医疗、教育等行业,大模型时代已经到来。大模型时代下,大模型训练效率将决定大模型进化速度,是大模型厂商比拼的核心。在大模型落地过程中,建设以GPU为核心的算力基础设施是讨论大模型训练效率的基本前提。

2023-11-14 19:15:22 267

原创 混合云场景下基于 Fluid 的焱融高效存储方案

Fluid 是一款开源的云原生基础架构。在计算和存储分离的大背景驱动下,Fluid的目标是为AI与大数据云原生应用提供一层高效便捷的数据抽象,将数据从存储抽象出来,以便实现:通过数据亲和性调度和分布式缓存引擎加速,实现数据和计算之间的融合,从而加速计算对数据的访问。将数据独立于存储进行管理,并且通过 Kubernetes 的命名空间进行资源隔离,实现数据的安全隔离。将来自不同存储的数据联合起来进行运算,从而有机会打破不同存储的差异性带来的数据孤岛效应。

2023-11-03 15:14:35 154

原创 生信领域|焱融存储为极智基因打造高性能生物医学平台

基于 YRCloudFile 分布式存储架构,数据及元数据节点可按需扩展,达到容量与性能均线性增长的能力,满足基因测序等核心业务发展带来的数据扩展问题,有效解决基因测序应用中,对海量大文件存储场景高聚合带宽、小文件存储场景高 IOPS 的存储需求。基因分析是一个依托大规模 HPC 运算的模式,存储需适配大规模的 HPC 并发访问,同步读写数据的能力,分析过程会读写海量小文件,所以高并发压力下,存储需提供高 IOPS 能力,才能与 HPC 算力集群适配,避免计算资源的浪费。

2023-11-03 14:56:52 265

原创 焱融全闪 | 高算力时代下的国产存储之光

大模型的持续进步高度依赖于算力基础硬件的发展, GPU 在算力、闪存容量、带宽性能等方面飞速发展,然而单个 GPU 计算能力的发展速度,远慢于大模型对于算力需求增长的速度,因此,在存储产业蓬勃发展的大背景下,全闪技术开发壁垒较高,焱融科技作为全闪存储代表厂商,将加快全闪存储技术创新研发及应用落地,完善产业生态,提升国产存储全球技术竞争力。此外,基于主流国产生态的硬件平台、操作系统以及应用进行了深度的适配及优化,在稳定性、性能、可靠性、易用性等方面能够满足复杂的企业级应用需求。

2023-11-03 14:39:41 173

原创 浙大材料学院高性能存储实践,加速 AI 新材料科研创新

其中,焱融分布式存文件存储系统 YRCloudFile 作为基础应用系统参与到材料日常的设计中,为材料工程提供海量数据存储和高性能数据服务,帮助客户在多尺度建模计算中完成从材料到器件的系统研发,再将建模结果通过高通量计算完成材料全空间快速筛选,定向设计新材料。此外,深度学习和机器学习算法还可以自动化材料的优化过程,通过不断迭代和学习,使得材料的性能不断提升。在材料工程领域中,需要通过深度学习和机器学习算法,对大量的材料数据进行分析,预测材料的性能、结构和相互作用,从而指导材料设计的方向和参数选择。

2023-11-03 14:38:27 152

原创 YRCloudFile V7.0.0发布| 新增 EC 数据冗余保护功能

在该版本中,YRCloudFile 增加对 EC (Erasure Code)纠删码的支持,同时还进行了多项技术优化,大幅提升了存储系统的可靠性、稳定性和可用性,产品功能更具灵活性。把写入存储系统的数据切割成若干个固定长度的数据块(N),之后再根据数据块计算出若干个校验数据块(M),最后将数据块和校验块一并存储在系统中的不同节点或不同磁盘上。此外,在云原生场景,YRCloudFile 实现了客户端的动态挂载,支持从统一的 CSI 按需对接多个目标存储集群,满足在容器业务需要访问多套存储环境的需求场景。

2023-11-03 14:37:34 243

原创 焱融科技助力智谱AI,打造大模型训练加速之道

焱融科技作为国内领先的高性能存储方案技术提供商,专注于 AI、智能汽车、AI 大模型领域,通过产品自身的技术优势帮助客户完善数据基座的构建,并且依据通用 AI 特性,推出适用于 AI 场景的存储功能,将行业应用场景深化,成为垂直领域的存储专家,帮助客户更好地追求业务创新。大模型计算量庞大,计算复杂度高,参与计算的数据规模巨大,大模型越成熟所需数据越丰富,而海量数据需要更强悍的存储性能。同时,大模型的各环节业务流程的衔接,还对数据广泛、高效流动有着极高要求,对于海量数据的存储流动是刚需。

2023-09-08 13:50:04 147

原创 超算环境为什么不推荐使用 NFS

NFS 英文即 Network File System,网络文件系统,是由 SUN 公司研制的 UNIX 表示层协议( presentation layer protocol ),它最大的功能就是可以通过网络,让不同的机器、不同的操作系统可以共享彼此的文件,能使使用者访问网络上别处的文件就像在使用自己的计算机一样。NFS 作为最常用的网络文件系统能够提供简单易用、功能强大的存储解决方案。得益于其简单、成熟、易使用等特性,几乎在 Linux 每一发行版本中都是标准组件。

2023-07-06 11:57:58 257

原创 实现 AI 大语言模型的关键在于超高性能存储能力

训练巨量模型需要巨大的算力,随着数据集和模型规模不断增加,应用程序载入数据所花费的时间变得越长,进而影响了应用程序的性能,缓慢的 I/O 严重拖累 GPU 的强大算力。,实现以直接内存的存取方式,将数据传输至 GPU 内存上,能够更好地管理数据路径,使数据在应用程序和存储之间通过更短、更有效的路径传输,显著降低 I/O 延迟,提升数据带宽,使支持 GDS 的应用程序能够充分释放 GPU 计算能力,为人工智能和机器学习(AI/ML)以及数据分析等业务加速。供应商需要支持大语言模型所需的向量嵌入。

2023-06-27 11:47:41 279

原创 基于 LRU-K 模型如何实现高效的元数据缓存?

LRU 的基本思想是如果数据最近被访问过,那么将来被访问的几率更高。我们实现 LRU 时,要维护一个队列,第一次访问的数据直接入队,重复访问的缓存,将该数据移至队尾,需要删除时删除队头的数据,这样就能保持队列越往后,数据再次被访问的可能性就越大。焱融分布式文件存储 YRCloudFile 提供元数据服务的组件是 MDS,在海量目录百亿级文件规模场景下实现了高效的存储层的元数据缓存,能够提供卓越的性能和可靠性,满足用户对文件存储的各种需求,实测性能成倍提升,为用户提供了高性能、高可靠、高扩展的存储服务。

2023-06-26 11:45:07 464

原创 国内首发|性能飙升100% 焱融全闪存储成功适配 InfiniBand 400Gbps 网络

随着数据中心分布式计算集群的规模越来越大,数据量指数级膨胀,而大规模集群间大量数据传输的开销也越来越大,这需要高性能、低延时的网络来实现对算⼒、存储等分布资源的整合。作为焱融科技的深度合作伙伴,英伟达表示:“焱融科技是国内最早采用 Quantum 平台 InfiniBand 的并行文件存储系统的合作伙伴,基于 InfiniBand 原生 RDMA,无损网络及超低时延的特性,焱融的并行文件系统 YRCloudFile 具备业界一流的存储性能和接近线性的扩展能力,非常适合大规模高性能集群的存储场景应用。

2023-06-25 16:28:35 304

原创 YRCloudFile 分布式存储加速基因测序 解锁生命密码

生物学分析往往会通过对比源生物信息产生大量的结果数据,存储需要对海量的数据妥善保存,且提供高性能的并行文件存储保持上层生物数据分析计算,底层的存储系统在数据的管理上需要更加便捷。通过焱融高性能分布式文件存储系统的高灵活和高可扩展性满足了基因测序行业客户不断增长的业务需求,实现了计算资源和数据资源的完全透明无缝扩展,提供高效的存储效率和并行能力,为基因测序平台提供了高效、稳定、可靠的支撑,让客户更多地关注业务能力,发挥数据的价值,让其更好地通过基因测序服务社会,以技术驱动“精准医疗”的发展。

2023-06-13 17:30:15 209

原创 北邮基于焱融存储构建高性能智能医学研究平台

北邮 AI 医学图形图像研究平台采用 YRCloudFile 提供的解决方案,打造了一套高性能、高可用、高扩展性的 IT 存储基础设施,在提升海量文件数据存储能力的同时,智能医学平台也实现了全生命周期的数据管理能力,在保证百亿级文件操作性能提升的基础上,全面提升了数据管理效能,满足了研究平台高并发访问数据、数据共享安全及数据可扩展能力的需求,为研究平台技术快速落地提供了关键的存储支撑。在可扩展性方面,现有的存储方式不能很好的支撑海量的数据存储需求,也难以跟上数据激增的步伐,平台的可扩展性也受限;

2023-06-13 15:56:19 227

原创 「焱融科技」获中关村国际前沿科技创新大赛·大数据与云计算领域 TOP10

5 月 28 日,第六届中关村国际前沿科技创新大赛总决赛颁奖典礼在中关村示范区展示中心会议中心隆重举办,焱融科技实力入选大数据与云计算领域 TOP10 榜单。

2023-06-02 16:51:46 156

原创 焱融科技入选赛迪 2022 中国分布式存储报告挑战者象限

焱融科技凭借领先的分布式存储技术实力和产品性能、丰富的行业和场景落地实践、便捷高效的产品服务居于赛迪顾问评选的“2022 年中国分布式存储厂商竞争力象限图”挑战者位置,实力进一步得到行业认可。

2023-05-29 17:24:49 157

原创 加速信创生态建设 焱融科技与优炫软件完成兼容性互认证

近日,北京焱融科技有限公司(简称“焱融科技”)自主研发的焱融分布式文件存储产品 YRCloudFile 与北京优炫软件股份有限公司(简称“优炫软件”)的优炫数据库管理系统 V2.1,经双方协同测试,已完成兼容性认证,双方产品完全兼容,运行稳定,安全可靠,可为各类信息化应用提供保障。

2023-05-22 15:31:20 187

原创 重塑数据活力 | 焱融科技与DaoCloud 道客完成云原生兼容性认证

近日,焱融科技自主研发的 YRCloudFile 高性能分布式文件存储产品与DaoCloud 道客的 DaoCloud Enterprise 云原生应用云平台V 5.0,经双方联合测评,已完成兼容性认证。

2023-05-04 16:02:00 148

原创 实力担当!焱融文件存储再次中标中国移动项目

近日,焱融科技中标中国移动研究院网络设备及分布式软件采购项目。本项目将通过业界领先的焱融高性能分布式文件存储系统 YRCloudFile 为中国移动智算及相关项目提供高性能存储方案,推动 AI 及大规模算力的技术成熟和应用发展。

2023-04-11 16:40:14 182

原创 焱融全闪存储轻松构建百亿私募量化投研平台

在量化行业数据存储痛点中,焱融高性能文件存储打造高质量的可靠存储底座,解决量化数据处理流程中不同环节带来的存储难题,实现完整的数据统一管理、场景多样化等一站式存储管理平台。

2023-04-11 11:14:42 246

原创 YRCloudFile V6.10.0 功能新增对 NVIDIA GPUDirect 与回收站的支持

焱融分布式文件存储 YRCloudFile 通过一系列技术操作优化小文件的元数据性能,包括基于内存缓存的元数据管理、轻量级 open、lazy close 以及 batch commit 等技术的应用,使得 YRCloudFile 在处理海量小文件时表现出优异的性能,功能方面更加持续丰富和完善企业级特性,适配更复杂的业务场景,从而更好地满足用户的需求。

2023-03-30 15:14:37 184

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除