WADP:Universal Storage构建AI原生统一数据基础设施


当前,随着大型语言模型(llms)和多模态人工智能的爆发式发展,全球数据量呈指数级增长,数据特性与访问模式也发生根本性转变。ai发展重心已从“训练主导”转向“推理优化”和“agent生态”,这使得对底层基础设施提出了全新的审视与要求。这种范式转变对数据存储提出了前所未有的要求:极致吞吐、低延迟、高并发、多模态数据统管、记忆持久化以及自主可控和安全性。这些要求使得存储不再仅仅是传统的数据持久化介质,而是支撑万亿参数大模型高效训推和agent行动闭环的智能枢纽。

面对这些挑战,传统的竖井式存储架构已显得力不从心,导致数据割裂、管理复杂、效率低下,难以满足AI对极致性能、弹性扩展及统一数据访问的严苛要求。传统存储产品“硬件专属、协议分立、无法协同”,性能低、时延大,严重限制了新兴硬件和AI数据的价值发挥。打补丁式优化已无法满足Agent时代对存力的颠覆性需求,迫使行业必须重构存储基座。

ExponTech AI 原生智能数据平台WADP应运而生,旨在为企业构建面向未来的AI数据基础设施,驱动智能化转型 。这一重构存储基础设施的理念,正是通用存储(Universal Storage)的核心要义,即构建一个统一、智能、无限扩展的数据平台底座,消除数据孤岛,让企业真正步入“数据随用随取”的AI应用新时代 。

01 Universal Storage,为AI时代注入强劲动能

WADP(WIDE AI Data Platform)是华瑞指数云最新推出的AI原生智能数据平台,以“One Platform, All Workloads”为核心理念,通过统一平台融合替代传统存储阵列、文件系统及大数据存储,一站式承载企业核心生产系统(如关键数据库)与AI全流程数据(训练/推理/向量检索),满足高吞吐、低时延、大容量、低成本和智能数据管理的需求。其基于自研WiDE分布式数据引擎与天枢元数据引擎,性能较开源Ceph提升30倍,仅用普通服务器即可媲美高端全闪阵列存储。支持块/文件/对象/AI专用接口(KV/Semantic)等多协议共池,实现万亿文件管理及微秒级时延。这种“多种存储协议原生互通访问同一份数据”的能力 ,极大提升了数据流动性,消除了传统方案中因数据拷贝产生的延迟和冗余。借助全速RDMA/IB网络与SDS 2.0架构,可扩展至千节点集群,并支持混合多云部署,将AI数据效率提升10倍。

02 特性价值:创新引擎增强与全新子产品线

WADP在核心引擎层面进行了多项突破性增强,显著提升了系统的性能、灵活性和可靠性。

1. 增强的引擎能力:驱动前所未有的灵活性与性价比

1.1 跨池在线卷迁移:简化与动态调整业务

WADP引入了先进的“跨池在线卷迁移”能力,旨在简化数据管理并支持业务的动态调整。

迁移机制: 基于“日志原理”实现,确保数据迁移过程中基于IO粒度的数据一致性,实现“无感RPO和RTO”。

业务无感知: 迁移过程对上层业务完全“无感知”,无需业务系统配合或停机,确保业务连续性。

数据粒度与场景:支持在同集群内以数据卷粒度进行跨池在线热迁移。用户可方便地在各存储池或存储集群间进行数据迁移,充分利用存储空间,实现容量均衡,并根据业务性能要求,将数据在不同性能池之间迁移,如数据库冷热数据动态迁移。

方案优势: WDS迁移次数无限制,采用并行复制机制,速度快,提供可视化UI管理和自定义迁移速度。支持A/A(Active-Active)模式迁移,天然支持iSCSI/FC/RBD等多种协议。结合异构存储纳管特性,还支持第三方SDS或传统存储纳管后,实现跨集群跨池数据管理与迁移。

这种在线卷迁移能力,为AI工作负载提供了极大灵活性,使得企业能根据AI工作负载实时需求,动态调整数据在不同性能层级存储池中的位置,优化资源利用率和成本效益,同时确保AI训练和推理的连续性。

1.2 Append Only存储引擎作为EC底座:提升性能与延长寿命

WiDE存储引擎引入了创新的“Append Only存储引擎”,作为其纠删码(EC)的底层基础。

工作原理: 无论SSD还是HDD,大块顺序写都能极大提升硬盘吞吐能力。Append Only引擎采用“ROW策略”,将随机小IO写转换为顺序大块写,从根本上改善了传统覆盖写模式的性能低下局面,并解决了EC模式下的写放大问题。

减少写放大: 在EC模式下,有效地消除读改写减少写放大问题。

延长SSD寿命: 数据以追加方式写入,避免频繁覆盖写和随机写,从而“大大减少SSD闪存的擦写次数”,有效延长SSD使用寿命。

1.3 自研高性能EC实现:高效率与高可靠性的保障

WADP采用了“自研高性能EC(Erasure Code)算法”,为数据提供了极致的空间利用率和高可靠性。

灵活的冗余策略: 支持从“2+1、4+2、6+2、8+2最大可以到22+2”的不同比例EC配置,空间利用率最高可达“91.6%”。支持机柜级、节点级冗余策略,并支持不同比例EC的折叠,满足容量与成本平衡。

低时延与快速故障切换: 得益于Append Only引擎优势,WADP在系统常态工作负载运行区间(40%-60%)下,仍能提供“百微秒级的时延响应”。对于磁盘、网络等设备亚健康问题,系统能够实现“毫秒级切换”,确保业务系统稳定运行。

SSD寿命延长: Append Only模式下数据以追加方式写入,避免频繁覆盖与随机写,有效减少SSD闪存擦写次数,延长SSD使用寿命。

WADP的高性能EC不仅提供业界领先的空间利用率,显著降低存储成本,更通过自研算法和与Append Only引擎的协同,确保极端负载下的性能稳定性和故障恢复能力 。

1.4 EC引擎实现软件压缩能力:空间优化与性能兼顾

WADP的EC引擎还集成了“软件压缩能力”,实现了数据存储的进一步优化 。

无损压缩:提供“无损数据压缩和解压缩”,通过算法剔除冗余信息,缩减数据体积而不丢失任何细节,实现“压缩不减质、还原零误差”。

高压缩率:压缩率可达到“≥2:1”,显著降低存储硬件成本。

PictoGraphic PictoGraphic

AI驱动的矢量插图库和插图生成平台

PictoGraphic 133 查看详情 PictoGraphic

大幅提升得盘率:结合高效的压缩比在EC或者副本场景可以实现超过100%的得盘率。

2. 全新子产品线:WFS与WQS的发布

除了对核心引擎的增强,华瑞指数云还发布了两款全新的子产品线:WFS和WQS,进一步完善了WADP在全场景数据融合和AI特定需求上的能力 。

2.1 WFS (WiDE File Storage):高性能分布式并行文件系统

WFS作为WADP的“高性能分布式并行文件系统”,其优势在于:

架构优势:“采用独立元数据服务引擎——天枢元数据服务引擎,并支持元数据负载均衡。这种独立元数据设计,是其实现高效元数据服务和高性能的关键,尤其适用于处理AI训练中常见的海量小文件场景”

功能特性:支持多协议接口(NFS、CSI-NFS、SMB),提供目录权限管理、文件系统跨池、文件网关HA(高可用)、小文件合并、访问认证、用户鉴权、用户管理、目录配额和目录QoS等丰富功能。

目标场景:专为“AI大模型、医疗PACS、企业办公文件存储、云原生K8S”等场景设计。

WADP:Universal Storage构建AI原生统一数据基础设施

WFS的推出,使得WADP能以统一架构,同时满足企业对传统文件存储和AI大模型对高性能并行文件系统的需求 。其对小文件合并和高效元数据服务的支持,直接解决了AI训练中频繁读写大量小文件带来的性能瓶颈,确保数据加载效率,提升GPU利用率。

2.2 重磅发布AI原生产品 WQS (WiDE Query Storage):优化推理效率,降低算力成本

WQS(WiDE Query Storage)是华瑞指数云面向AI场景推出的“全新AI原生产品”,核心目标是“优化推理效率,降低推理算力成本,为Agent的运行提供便捷的记忆体服务层。

AI专用接口能力:基于WiDE引擎,提供“AI场景的专属接口能力”,特别是KV和Semantic接口。被设计为“面向大模型推理的多级KVCache与Agent记忆体服务层”。

KVCache优化:WQS能将KVCache从昂贵的GPU显存和CPU内存分层到成本更低的SSD上,形成L2/L3级KVCache能力。这“显著降低显存占用”,从而支持“多会话并发与长上下文推理”。通过卸载KVCache,“大幅提升LLM推理效率,并且降低显存和内存的使用成本”。

极低时延:凭借WiDE引擎的高性能低时延KV读写能力,WQS能保障关键路径的稳定响应达到“100us级别”(100微秒级)。

极高带宽:KVCache的读写可以逼近物理网络的带宽上限。

语义接口实现:WQS未来将实现Semantic接口,由天枢元数据服务统一进行推理全流程过程中的数据管理跟语义检索。

生态集成:支持即插即用接入vLLM/LightLLM/SGLang等主流推理框架。

WADP:Universal Storage构建AI原生统一数据基础设施

WQS直接解决了大模型推理中最核心的成本和性能瓶颈——GPU显存。通过创新KVCache分层技术,WQS不仅大幅降低推理成本,更提升推理效率和模型处理长上下文能力,加速大型AI模型的工业化和普及。

03 以存代算,开创AIDC新纪元

华瑞指数云坚持“核心代码全栈自研”,不依赖国外开源“捷径”。WADP通过“全软件化、分布式化、云化与智能化”,为AI、高性能分析、核心数据库等场景提供极高性能、超低时延、稳定可靠的统一存储与管理能力。彻底打破了传统竖井式存储架构的局限 ,将企业核心生产系统与AI数据管道统一承载于同一平台,实现了数据在块、文件、对象和AI专用接口间的原生互通与共享 。可以自如应对AI海量小文件和高并发元数据挑战,并赋能了AI检索和Agent记忆体等高级功能。凭借其统一架构和AI原生特性,WADP能够全面覆盖两大核心应用领域:通用企业存储场景和AI Infra存储场景。

在通用企业存储场景,它为数据库、虚拟化、容器和通用文件需求提供了高性能、高可靠的统一解决方案 。而在AI Infra存储场景,WADP更是核心所在。

1、优化AI训练与推理工作流: 提供统一数据平台,覆盖AI数据全生命周期,通过WDS和WFS加速数据加载、Checkpoint写入和模型分发,实现模型秒级加载和5倍加速。

2、革命性L2/L3 SSD KVCache(WQS):通过将KVCache从GPU显存卸载到SSD,大幅降低推理成本(节省60%GPU卡成本),同时将推理速度提升5-8倍,并提供近似无限的持久化内存空间,与主流推理框架无缝兼容。

3、一站式RAG全流程数据存储:统一承载结构化和非结构化数据,包括关系型数据库和向量数据库,并借助WiDE引擎高性能优化整个RAG过程,赋能Agent长久记忆。

WADP卓越的产品能力也得到了世界级权威测试的验证,是目前全球唯一能同时覆盖企业关键业务(SPC-1)与AI工作负载(MLPerf Storage)的分布式存储软件。ExponTech在2025年打破了SPC-1性能世界纪录,成为全球首个超越高端全闪阵列的分布式存储软件 。在MLPerf Storage v2.0评测中,WADP在AI训练和Checkpoint写入效率上均取得了全球顶尖成绩,尤其在硬件利用效率上遥遥领先。这些成就共同证明了WADP是目前业界在通用存储和AI存储领域都具备超高性能、高可靠性及全栈式能力的产品 。

未来,WADP将在两大领域中不断完善产品能力,真正实现“Universal Storage —— One Platform, All Workloads”的愿景,引领行业迈入“数据随用随取”的AIDC新时代,加速千行百业的智能化转型。

以上就是WADP:Universal Storage构建AI原生统一数据基础设施的详细内容,更多请关注其它相关文章!


# 显存  # 泰安营销推广排名  # 千川推广营销场景选择  # 文登宣传型网站建设  # 建设法规的网站  # 网站增加关键词排名吗  # 巢湖网站排名推广  # 淘宝优惠劵推广网站  # 石家庄推广网站多少钱  # 成都抖音搜索seo优化  # 响应网站建设教程  # 腾讯  # 重构  # 小猪  # 数据管理  # 文件系统  # 快讯  # 时延  # 记忆体  # 基础设施  # 高性能  # b网  # 数据访问  # 虚拟化  # ai大模型  # 大模型  # ai  # 硬盘  # app  # 大数据  # 人工智能 


相关栏目: 【 Google疑问12 】 【 Facebook疑问10 】 【 优化推广96088 】 【 技术知识133117 】 【 IDC资讯59369 】 【 网络运营7196 】 【 IT资讯61894


相关推荐: 映宇宙数字人“映映”亮相ChinaJoy,展示AI黑科技实现用户互动  软通动力多项AI创新产品及应用亮相2025世界人工智能大会  Prompt解锁语音语言模型生成能力,SpeechGen实现语音翻译、修补多项任务  传Meta 2025年推出首款AR眼镜,采用军用级别材料,计划生产1000台  AI生成新闻网站数量激增,正在疯狂赚取广告收入  大模型的“黄金搭档”来了!腾讯云正式发布AI原生向量数据库,提供10亿级向量检索能力  干货满满,2025昆山元宇宙国际装备展等你来打卡!  280万条多模态指令-响应对,八种语言通用,首个涵盖视频内容的指令数据集MIMIC-IT来了  OpenAI宣布在伦敦设立海外分部,要招揽“世界级人才”  美图公司影像节或发布AI设计新品  人工智能在项目管理中的作用  利用AI探索抗体“钥匙”、加速药物研发——访百图生科团队  聚焦人工智能大模型、AIGC 徐汇十余场重磅论坛等你来  AI 助手 Copilot 上线,微软 Win11 Dev 预览版 Build 23493 发布  小米又拿下国际比赛第一:AI翻译立功  苹果2万5的AR遭遇砍单95%:不及预期  揭秘AI数字人语录:抖音AI小和尚、老者语录能赚钱吗?  猿辅导发布最新SaaS业务进展公告:Motiff UI设计工具推出三项新的AI功能  灯塔AI大模型票房预测上线:开源算法不断提升精准度  管提需求,大模型解决问题:图表处理神器SheetCopilot上线  英媒:硅谷有些人太鼓吹AI,宣扬“学习无用”  明略科技发布免费开源TensorBoard.cpp,促进大型模型的预训练工作  找对了风口想不火都难,乐天派机器人,安卓机器人的最终形态?  《爱康未来之夜嘉宾官宣,携手共赴AI未来》  陈根:AI冥想教练为用户提供个性化指导  美图设计室2.0什么时候上线  构建数字文旅新高地!洛阳涧西区开启元宇宙时代  2025世界人工智能大会(上海)开幕式纪要  全球首款AI裸眼3D平板 国产的售价破万  “上海市民营企业人工智能赋能创新中心”揭牌成立  微软商店 AI 摘要功能开启预览,帮助用户迅速了解应用评价  亚太地区 70% 的企业高管正探索生成式 AI 应用或已经进行投资  亚马逊确认今年不会举办 re:MARS 机器人和人工智能大会  大厂出品!这个AI网站太顶了,所有功能免费用  QQ音乐业内率先推出「AI一起听」功能,领取你的AI听歌助手  遵义市首次引入手术机器人,成功实施全膝关节置换术  人工智能如何帮助制造业?  实践J*a开发,构建高性能的MongoDB数据迁移工具  消息称苹果 iPhone 15 系列健康应用将深度融合 AI 技术  羊驼家族大模型集体进化!32k上下文追平GPT-4,田渊栋团队出品  马斯克回应“人工智能让一切变得更好”:我们已经是半机器人了  无人机在电力巡检中的应用:全面解析高效巡检流程  掌阅科技对话式AI应用“阅爱聊”开启内测  “图壤·阅读元宇宙”亮相北京国际图书博览会  喜马拉雅在国际会议挑战赛中突破语音重叠难题斩获第一 加速AI创新  周鸿祎:用超级AI实现室温超导和核聚变,实现能源自由  猿辅导推出Motiff,整合三大AI功能,助力UI设计生产力革新  Win11 AI 助手 Windows Copilot 被吐槽:套皮的 Edge 浏览器  Stability AI 推出文生图模型 SDXL0.9,GPU要求下探至消费级水平  特斯拉机器人面世 未来将大幅提振磁材需求,引领人工智能时代 

 2025-09-16

了解您产品搜索量及市场趋势,制定营销计划

同行竞争及网站分析保障您的广告效果

点击免费数据支持

提交您的需求,1小时内享受我们的专业解答。

运城市盐湖区信雨科技有限公司


运城市盐湖区信雨科技有限公司

运城市盐湖区信雨科技有限公司是一家深耕海外推广领域十年的专业服务商,作为谷歌推广与Facebook广告全球合作伙伴,聚焦外贸企业出海痛点,以数字化营销为核心,提供一站式海外营销解决方案。公司凭借十年行业沉淀与平台官方资源加持,打破传统外贸获客壁垒,助力企业高效开拓全球市场,成为中小企业出海的可靠合作伙伴。

 8156699

 13765294890

 8156699@qq.com

Notice

We and selected third parties use cookies or similar technologies for technical purposes and, with your consent, for other purposes as specified in the cookie policy.
You can consent to the use of such technologies by closing this notice, by interacting with any link or button outside of this notice or by continuing to browse otherwise.