鱼皮AI导航
鱼皮AI导航
  • 主页
  • 社区
  • AI工具
  • AI知识库
  • AI提示词
  • MCP
  • Skills
  • AI学习资源
  • AI资讯
  • GitHub开源
登录/注册

AI时代数据存储架构如何创新?西部数据在WAIC公布路线图

编程导航
编程导航
2026-07-21 23:51
阅读 156
编程导航
2026-07-21 23:51
阅读 156

智东西(公众号:zhidxcom)
作者 | ZeR0
编辑 | 漠影

智东西7月21日报道,世界人工智能大会WAIC 2026期间,西部数据通过参展与举行专题分论坛,全面呈现存储基础设施如何支撑AI的规模化发展。

数据如何被存储、管理与长期保留,已成为决定AI能否实现可持续、经济高效规模化发展的关键因素。

在展台上,西部数据展示了两项业界首创的先进HDD创新技术:高带宽硬盘技术和双枢轴硬盘技术,以及HAMR(热辅助磁记录)、ePMR(能量辅助垂直磁记录)和UltraSMR技术,并展现了这些技术如何与其平台产品组合相辅相成,专为满足规模化AI基础设施的需求而打造。

AI时代数据存储架构如何创新?西部数据在WAIC公布路线图

其中,高带宽硬盘技术通过多磁头在多个磁道同时进行读写,可在不增加功耗的前提下提供高达传统HDD 2倍的带宽。该技术具备清晰的拓展路径,未来可实现高达8倍的带宽增益,目前已交付客户进行验证。

双枢轴技术在独立枢轴上增加了第二组独立运行的执行器,可在3.5英寸硬盘内提供高达2倍的顺序IO性能增益 。这与以往牺牲容量且需要客户大幅度修改软件的双执行器设计不同,双枢轴技术通过缩小磁碟间距,在单个硬盘中搭载更多磁碟,从而提升整体容量。

通过这些技术的结合,西部数据将使硬盘顺序IO性能整体提升至4倍,在实现100TB HDD的同时,仍能保持客户当前享有的每TB相对IO速率。这有效减少了客户在容量扩展过程中增加SSD部署或重构服务架构的需求。

西部数据还展出了面向大规模数据存储环境的多款Ultrastar企业级HDD解决方案,包括40TB和34TB Ultrastar DC HC6100数据中心UltraSMR硬盘、30TB和28TB Ultrastar DC HC5090数据中心CMR硬盘、采用HAMR技术的40TB Ultrastar DC HCS100数据中心UltraSMR硬盘,以及采用高带宽硬盘和双枢轴技术的性能优化型硬盘。

值得注意的是,采用UltraSMR ePMR技术的40TB HDD现已进入客户认证阶段,并计划于2026年下半年实现量产。

西部数据展出的精选先进存储平台解决方案,包括全新Ultrastar Data60 3000混合存储平台、OpenFlex Data24 4200存储平台以及RapidFlex C2000网络交换桥接适配器,旨在支持可扩展部署、灵活的资源利用以及满足现代数据基础设施的要求。

7月19日下午,西部数据举办以“面向AI时代的数据存储架构创新”为主题的分论坛。西部数据开发工程高级副总裁Tim Rausch发表主题演讲。

西部数据从一个关键差异点重新审视了AI基础设施:即计算周期可以重复利用,而数据会持续累积。

Tim强调,AI不仅是计算系统,更是数据系统,在其中训练和推理往复循环。每一次交互都会产生新的数据,这些数据可被存储、重新纳入训练并用于改进后续模型,使存储需求呈现持续性和累积性。如何高效管理这些海量数据,已成为行业面临的核心挑战。

他着重分享了三类工作负载:

第一类是训练数据,通常一次写入、存放在HDD上,并被周期性读取,因为模型并非始终处于训练状态。随着用户生成的内容回流到AI数据循环中,训练数据量会持续增长。这一层最看重的是能够扩展到EB级、且具有成本效益的存储,而这正是HDD的用处。

第二类是推理,例如我与AI交互,请它提供晚餐食谱或生成一张图片,同时还有数百万用户在以类似的方式使用AI,这会产生大量随机小数据读取,还需要内存来保留对话上下文。因此,这一层既需要高带宽和高IOPS,也需要持久化存储,这正是SSD发挥作用的场景。

第三类是推理输出,也就是AI为我生成的食谱、图片或其他内容。此外,AI还会保留日志、追踪记录、合规记录和元数据。很多数据最初位于HBM或DRAM中,但很快会向下迁移到HDD,进行持久化存储。

AI存储栈与传统云应用使用的存储栈有所不同。传统应用可能主要依赖两个存储层级:闪存和HDD。假设一个应用中有数千张图片,用户打开应用时最先看到的10到20张图片可能来自NAND闪存,以便快速呈现;继续向下浏览时,后续图片则从HDD加载,因为HDD更具成本效益。开发者会根据性能与成本的平衡,将内容放到合适的存储层。

AI构建者采用同一套原则,但涉及到更多层级:

  • 上层是模型权重/GPU显存溢出,即HBM或DRAM紧邻成本高昂的GPU,以便持续向其供给数据。
  • 下一层是KV缓存,也就是AI系统的短期记忆,主要使用DRAM和SSD。
  • 再下一层是语义数据库,其中包含向量、嵌入和检索增强生成(RAG)数据,通常运行在SSD上的高性能数据层。
  • 最底层是HDD大容量存储,用来保存日志、用户生成内容的副本以及训练数据。

AI时代数据存储架构如何创新?西部数据在WAIC公布路线图

“在规模化发展中,经济性决定架构。通过闪存处理性能敏感型小数据读取,由HDD承载不断累积的写入流,这种智能数据分层和均衡的存储架构不仅能够从容应对持续增长的数据规模,更让AI基础设施变得务实、优雅且经济可行。”Tim说。

他展示了一个案例:生成一个3.97MB的视频需要在整个存储栈中完成46.5GB的读写,并在后端留下506MB数据。当推理输出被存储、重新纳入系统并用作合成训练数据后,便形成“模型改进—更多推理—更多输出被留存”的自我强化循环,持续扩大持久存储层。

AI时代数据存储架构如何创新?西部数据在WAIC公布路线图

Tim认为,成功的AI企业会将数据放在正确的层级,并让数据在AI存储栈的4个层级之间持续迁移。

“目前我们看到,约80%的AI内容存储在HDD上,20%存储在SSD上。”他谈道,他并不是主张HDD占据的市场份额应当提高,而是想强调数据总量本身正在增长,HDD与SSD并不是在面临存量竞争,而是彼此互补,HDD、SSD、DRAM和HBM应根据各自的性能和经济性部署在最合适的层级。

为应对持续累积的数据需求,西部数据分享了未来五年的发展路线图。

西部数据将采取ePMR与HAMR并行发展的路径,帮助客户更平稳地迈向2029年单盘100TB以上的容量。

AI时代数据存储架构如何创新?西部数据在WAIC公布路线图

对于需要高性能的工作负载,西部数据将通过高带宽硬盘技术与双枢轴技术提供带宽与IO性能方面的增益。

针对AI交互生成并需要持久留存的数据,可通过功耗优化型HDD提供经济可持续的解决方案。

此外,西部数据还将利用其智能平台,将HDD的经济性和优势延伸至更广泛的客户群体。

原文链接: AI时代数据存储架构如何创新?西部数据在WAIC公布路线图
站长:程序员鱼皮 老鱼简历 商务合作 增值电信业务经营许可证
2026 鱼皮AI导航 | 沪ICP备19026706号-6
🔥热门工具
朱雀AI检测朱雀AI检测
朱雀AI检测助手朱雀AI检测助手
LovartLovart
老鱼简历老鱼简历
WritePass官网WritePass官网
面多多面多多
CursorCursor
星月写作星月写作
零感AI零感AI
墨得问题墨得问题
🔥 热门文章
1
离谱,DeepSeek 崩了 5 小时,大家却喊:梁圣恩情还不完??
450
2
B 站上 DeepSeek 闹鱼灾了,我发起《大肥鱼清除计划》!
410
3
DeepSeek 全新模型发布,性价比最高的一集!
400
4
自己学习ai,直接买cursor 的套餐,还是买gpt 或者claude 的套餐?
370
5
又一个国产版 Codex 神器,也来卷办公了!
340
6
Vibe Coding 实战:从零构建现代专业级 AI 搜索引擎
330
7
day3-如何写出一个高质量的 Skill(组内分享) 高质量 Skill 不是“一个调得很顺的巨型 Prompt”,而是一个可验证、可回归、可维护的能力包。 先定义“什么算好”,再实现“怎么做好”。评估体系先于 Skill 本身成型。 下面用“故障诊断 Markdown 转 YAML”作为例子,但方法是通用的。 --- 一、先想清楚:Skill 到底是什么 一个 Skill 至少包含四部分: 部分 作用 接口 输入什么、输出什么、边界在哪 流程 分几步做,每步的产物是什么 规则 硬约束、经验规则、失败模式 降级策略 不确定时怎么办,而不是硬编一个看似合理的结果 高质量 Skill 的共同点:职责单一、接口清晰、规则可定位、输出可验证。 反例:把几十条经验全塞进一个主 Prompt,改一条规则要重调整个 Prompt,评估时也不知道是哪条规则退化。 --- 二、核心方法:先建评估,再写 Skill 不要先写转换器再补测试。正确顺序是: 1. 定义输出契约:什么算合法、什么算合格; 2. 建金标准集:一小批人工认可“可放行”的样本; 3. 先写评估 Skill:让它在金标准集上跑出基线; 4. 再迭代生成 Skill:每次修改跑同一套评估,无退化且目标维度提升才算正向。 这就是评估驱动开发:评估是 Skill 的单元测试,金标准集是回归锚点。 --- 三、评估 Skill:三层门禁,逐层递进 前一层不过,后一层不跑。每层留可追溯证据。 第 1 层:确定性硬门禁 用解析器、Schema、校验器完成,不消耗模型成本。 · 输出可解析; · 必填字段齐全,类型/枚举合法; · 引用目标存在,无悬空引用、无不可达节点; · 关键路径至少有一条能到达预期出口。 不通过直接打回。 第 2 层:语义断言 用脚本 + 结构遍历检查“逻辑对不对”,仍然保持确定性。 通用检查项: · 覆盖率:源材料里的关键步骤、分支、条件,输出里是否都有对应? · 完整性:每个判断节点是否都有明确出口?有没有死胡同? · 可达性:每条路径是否都能到达预期终点?有没有无出口循环? · 顺序与依赖:有先后依赖的操作,是否保留了顺序?有没有被拍平成无序列表? 例子:故障诊断转换中,检查“每个判断项是否有是/否/异常出口”“每条路径是否能到根因”。 第 3 层:LLM-as-Judge 只处理解析器表达不了的维度:忠实度、完整性、可执行性。 但 Judge 会漂移,不能单独放行,必须建立在第 1、2 层之上。Judge 的 Prompt、rubric、模型版本都要版本化,换模型必须用金标准集重新校准。 通用 Judge 维度: 维度 问什么 忠实度 输出是否忠实源材料意图?有没有自行发明内容? 完整性 关键步骤、条件、证据是否保留?隐式知识有没有被压成空话? 收敛性 输出是否仍指向原目标,而不是发散? 可执行性 下游不依赖源材料能否直接使用? --- 四、金标准集:回归测试的锚点 不需要一开始就标注几百份。用已认可的样本当种子,扩到 15~30 份,覆盖失败模式而非随机抽样: · 完整正例:典型流程; · 边界/异常分支:异常路径、循环、前置失败回退; · 已知易错模式:实际踩过的坑; · 留出集:不参与调优,只用于最终验收,防过拟合。 金标准不需要完美,只需要当前标准下认可可放行。 回归指标:关键路径用 pass^k(k 次全过),稳定性用 pass@k。 --- 五、工程约束:让批量产出可重放 · 幂等:同输入 + 同 Skill 版本 + 同规则 → 输出一致,否则无法判断变好是 Skill 改了还是随机波动; · 隔离不阻断:单份失败进隔离队列,记录失败层和原因,不阻塞其余; · 版本绑定:规则、rubric、金标准集进 Git;每份报告绑定“源版本 + 生成 Skill 版本 + 评估 Skill 版本 + Judge 模型版本”; · 抽样人工复核:Judge 临界样本 + 易错模式,人工抽检结果反过来校准 rubric。 --- 六、Skill 本身怎么写 · SKILL.md 控制篇幅,写清:输入约定、输出契约、分步流程、硬规则、降级策略; · 经验规则放 references/ 或 rules/,按失败模式分类,不要全塞进主 Prompt; · 不确定时标 needs_review: true,不要硬编看似合理的结果; · 迭代由评估报告驱动:报告告诉你哪层挂了、哪类失败模式,你改对应规则文件,而不是漫无目的调 Prompt。 --- 七、落地顺序(不要反过来) 1. 固化输出契约:Schema + 结构约束; 2. 建金标准集:从已认可的 + 最易出错的样本开始; 3. 先写评估 Skill:跑出基线报告; 4. 再迭代生成 Skill:每次修改对比逐项通过率,无退化且目标提升才算正向; 5. 批量运行 + 隔离回放:失败进队列,结束后人工抽检; 6. 评估 Skill 自身版本化:换 Judge 模型必须重新校准。 --- 八、给组员的三条硬要求 1. 不许凭感觉说“变好了”:每次修改必须附评估报告对比,逐项通过率说话。 2. 不许跳过确定性门禁直接看 Judge 分数:前两层挂了,Judge 分数没有意义。 3. 不许把规则堆进主 Prompt:规则按失败模式分文件,评估报告要能定位到具体文件。 --- 一句话收尾 生成 Skill 决定“能不能做”,评估 Skill 决定“敢不敢用”。 先让评估体系站稳,再让生成器迭代。这样交付的不是一堆“看起来还行”的产出,而是一套可证明、可回归、可交接的 Skill 质量体系。
320
8
我的第一个出海产品!7 天 2 万
310
9
WorkBuddy 本地 API 桥 + dsh 插件:把你的 WorkBuddy 额度,变成手边随手可用的模型
310
10
什么是LLM
300
11
最近在落地 AI Native 项目,卡在团队资产协同这块,想请教下社区各位有实际落地经验的同学: 我们现在的资产分为三块:项目文档(PRD/ADR/ 运行手册)、Agent Skill(业务技能、执行 SOP、提示词包)、MCP 工具服务定义。 目标是做到:人和多 Agent 共用一套可信资料源,Skill、MCP 配置、项目文档能够版本化、同步、共享、可评审。 目前我们初步方案是用 Git 做底层版本主线: - 文档:Markdown + ADR,带元信息,支持 RAG 检索 - Skill:单技能包目录化,带版本、评估用例、依赖声明 - MCP:项目级声明文件纳入 Git 但实际协作里遇到不少疑问,想参考大家成熟的实践: 1. 大家团队里,文档、Skill、MCP 三者是怎么组织目录和版本管理的?有没有稳定的仓库结构模板? 2. 多人协作时,Skill 的变更评审、灰度升级、依赖管理怎么做?如何避免本地版本不一致、“本地能跑别人不行”? 3. MCP 是统一中心化网关模式,还是大家各自本地启动 + git 同步配置?权限白名单、调用审计这块有什么好方案? 4. 有没有成熟工具链做自动同步(类似 agentmeld /teamai-cli)、变更校验、eval 回归门禁? 5. 文档和 Agent 的打通:哪些文档放进 Git 作为可信真值,哪些放外部知识库,边界怎么划分? 如果有现成的仓库样例、目录规范、团队协作流程,非常希望能分享参考,感谢!
260
12
PHP 被曝两大致命漏洞,请所有程序员抓紧做这件事!
260