京东云海存储成为全球最大规模基于国产CPU的AI存储技术应用

近日,在全球最权威的存储系统性能评测IO500榜单上,京东云海跻身榜单全球前四、国产自研第一。由此,京东云海存储成为全球最大规模基于国产CPU的AI存储技术应用,也是目前全球性能最强的基于通用NVMe架构的AI存储。

一、极致存储性能,斩获多项全球第一

基于通用 NVMe 盘存储服务器,结合全栈自研软件体系与深度调优,此次云海 AI 存储斩获了多项 "全球第一":

首先,通用硬件性能第一,不使用 PMEM 硬件加速,完全基于通用 NVMe SSD 设备,跑出全球领先成绩;

其次,性能成本比第一,以更低硬件成本实现接近持久内存架构的性能表现。

第三,可规模化落地第一,架构具备高度可复制性,可在智算/超算等大规模存储场景中快速部署。

在排行榜单上的优秀成绩,源于京东云十多年在存储领域的技术积累。作为京东云自主研发的面向AI大模型需求的新一代分布式存储系统,历经京东618、京东11.11大规模实践验证,基于存算分离架构,可以很好满足智算场景极致的存储性能需求。

在极致性能方面,云海AI存储可支持千亿级参数AI大模型,自研引擎采用全追加写模型,融合超低延时RDMA网络及软件架构优化,4K随机写IOPS达到1000万级,平均延迟在100微秒级,I/O性能接近本地NVMe磁盘,单节点可提供 44GiB/s的带宽性能。

云海为京东云全自研存储,代码自研率超98%,拥有完全自主知识产权,与主流国产化硬件和软件兼容互认,括操作系统、数据库、中间件、服务器、CPU、主板、网卡、SSD等,并基于全局无锁架构,充分发挥国产硬件能力。

二、超100家大型企业选择云海AI存储,加速AI落地产业

目前,来自银行、证券、汽车、零售等领域超100家大型企业,正在使用云海AI存储。

在科技领域,科大讯飞AI营销采用"开源分布式存储软件+服务器硬件"搭建,对十亿级小文件数据量时,读写性能陡然下降。升级京东云AI存储云海后,科大讯飞AI营销实现了一个集群一个文件系统,即可轻松应对多模态大模型时千亿~十万亿参数规模;同时,基于高性能存储层,以及大容量存储层的自动数据分级,在大幅降低存储成本的同时,实现了大模型训练能力的大幅提升,助力AI营销业务降本增效。

在互联网领域,墨迹天气是全球领先的气象服务企业,截至2024年,拥有超过7亿用户,天气日查询次数过6亿次。随着业务规模的扩大,墨迹天气越来越多的数据需要在降本增效的目标下进行安全的存储。墨迹天气与京东云云海共同建设新的分布式存储,采用低冗余存储的技术,在不降低性能和可靠性的情况下,只需要1.14个副本,大幅提升资源利用率。

在金融领域,国内某头部证券公司传统存储系统在性能、稳定性和故障恢复等方面存在诸多痛点,面临着系统架构整体国产化升级的迫切需求。京东云云海采用多台鲲鹏和海光CPU架构存储一体机搭建分布式存储集群,全面适配国产化系统及虚拟化平台。这一方案不仅满足了该证券公司的国产化需求,还通过提供POSIX、NFS、CIFS、S3等存储协议,支持块、文件和对象存储,实现了一个存储平台满足多种场景需求,提升了信息安全自主可控能力。

面向未来,京东云将持续投入自研存储系统的深度优化,推动高性能存储在 AI 模型训练、科学计算、大规模数据分析等场景中的更广泛应用,助力更多企业重塑AI生产力。

相关推荐
程序员cxuan15 小时前
我用 WorkBuddy + ima 把公众号文章做成了知识库。
人工智能·后端·程序员
程序员cxuan16 小时前
玩了一天 REA,我号快没了
人工智能·后端·程序员
高晶20 小时前
CANopen 在 BMS 系统中的 C 语言实战指南
设计模式·程序员
Hilaku20 小时前
AI 流式输出都用 SSE,什么时候必须换 WebSocket?
前端·javascript·程序员
海带紫菜菠萝汤21 小时前
PostgreSQL 19 延期一个月:AI 把找 bug 变便宜了,修 bug 还是人工价
人工智能·ai·程序员·架构·大模型
挖掘狂人21 小时前
编程语言的六十年:一部做减法的历史
程序员·vim·编程语言
codigger21 小时前
编程语言的六十年:一部做减法的历史
程序员·编程·编程语言
SimonKing1 天前
别再花钱调 OCR 接口了!这个国产开源工具,免费还能离线跑
java·后端·程序员
高晶2 天前
ARM 嵌入式 Linux 文件系统从入门到实战:目录结构、权限管理、选型与挂载排查全攻略
linux·程序员
米米商聊2 天前
语音进度显示 100%,为什么还不能判定播放结束?
程序员