企业AI所需的不只是速度更快的GPU和规模更大的模型。当存储团队为训练、微调、检索增强生成(RAG)和推理部署容量时,会遇到一个物理瓶颈,即在存储与计算资源之间传输海量数据集的速度。这一瓶颈会直接反映在存储负责人需要承担的指标上,包括未能达到SLA、云存储支出不断增加,以及难以证明合理性的资本支出申请。
出色的存储只是成功的一半
大多数AI架构都依赖兼容S3的对象存储,保存从原始训练集、向量数据库到最终模型权重的各类数据。在大规模环境中,这类存储必须应对持续不断的并发读写需求。几毫秒的延迟看似微不足道,但在数十亿个对象和数千个请求中会迅速累积。数据交付缓慢会导致计算资源闲置、训练时间延长,并使推理响应时间超出存储团队承诺的服务级别。
简而言之,AI性能受数据路径效率制约。当网络瓶颈、存储节点过载或旧有安全策略限制流量时,昂贵的硬件只能闲置。高性能存储至关重要,但只有数据能够快速、安全地传输至工作负载时,其价值才能得到体现。正是这一差距导致SLA未达标、GPU闲置以及难以合理解释的存储成本。
“F5与NetApp携手解决存储团队负责的数据路径瓶颈问题。”
AI数据交付中隐藏的瓶颈
在大规模应用中,制约因素通常并非模型,而是数据传输。
训练、微调和推理工作负载会持续从兼容S3的对象存储中提取数据。随着数据集不断扩大,存储层必须同步扩展,在提供文件时确保吞吐量和可用性不下降。如果数据流变慢,整个下游流水线都会停滞。
以下4个瓶颈问题反复出现:
- 存储节点拥塞。对象存储集群中的流量分布不均,导致部分节点过载,而其他节点处于空闲状态。
- 传输层限制。网络吞吐量上限以及存储控制器上的TLS处理会限制存储池与计算池之间的数据传输。
- 安全开销。繁琐的内联检查会降低管道处理速度,却无法提升实际防护效果。
- 存储成本引力。 固定在高成本公有云层级的数据集会推高运营成本,也使本地部署容量更难体现其合理性。
其影响远不止存储指标。性能下降会延长训练任务的运行时间,导致推理响应时间激增,并使昂贵的GPU处于闲置状态。数据路径不畅会降低已购存储和计算资源的投资回报。
要让管道始终满负荷运行,仅有大容量存储还不够。还需要一条专为快速、安全且不间断地向计算集群输送数据而构建的数据交付路径。
F5与NetApp如何构建弹性数据路径
扩展AI工作负载需要高性能存储,以及一条将数据高效传输至计算资源的路径。
NetApp StorageGRID可处理训练和推理所需的海量S3兼容对象数据,而F5 BIG-IP部署在StorageGRID前端,用于管理、保护和加速相关流量。BIG-IP充当高吞吐量交付控制器,优化数据从存储池传输到GPU集群的方式。
F5与NetApp携手解决存储团队负责的数据路径瓶颈,优势包括:
- 性能和吞吐量。BIG-IP可均衡存储请求、引导流量并优先处理关键工作负载,避免单个存储节点出现热点。硬件加速的TLS终止可避免存储控制器承担加密负载,使批量S3传输速度更接近线速。
- 可用性和可见性。在存储节点发生故障、进行例行维护或流量意外激增时,该联合解决方案可保持数据持续流动。同时,F5遥测和第7层可见性可帮助基础设施团队监控流量模式、识别使用趋势,并在性能瓶颈影响AI工作负载之前将其解决。
- 管道安全。 BIG-IP通过硬件加速加密和访问控制保护数据路径,在不降低传输速度的情况下,保护敏感的训练数据集和专有模型权重。
- 存储灵活性与成本控制。BIG-IP充当不受存储平台限制的统一入口,根据性能、可用性或策略,智能地将S3请求定向到合适的StorageGRID集群。无论组织采用单一部署,还是在全球运行多个StorageGRID环境,F5都有助于确保用户和AI工作负载无需更改应用,即可连接到合适的存储资源。
由此可在对象存储与计算资源之间建立快速、可靠且安全的路径。消除传输延迟有助于充分利用GPU,在突发性AI负载下维持存储服务水平,并让存储负责人更清楚地了解现有基础设施带来的回报。
F5与NetApp部署指南现已发布
了解弹性AI数据交付的价值是一回事,将其部署到生产环境则是另一回事。
因此,F5与NetApp联合发布了一份部署指南,现已推出。该指南详细介绍了如何在StorageGRID前端配置BIG-IP,以优化S3流量、维持跨存储节点和站点的高可用性,并保护端到端数据路径。存储和基础设施团队可从中获取经过验证的架构设计、虚拟服务器、S3运行状况监控和TLS卸载的分步配置说明,以及针对大容量对象传输的调优指南。
该联合部署指南可作为实用蓝图,帮助工程团队构建用于训练、推理或RAG的数据管道。团队无需从头设计S3前端入口,而是可以部署经过测试的架构模式,在自身环境中验证吞吐量和可用性指标,并以此为依据,为下一步容量决策提供有力支持。
下载F5 与 NetApp 部署指南,了解详情。
在NetApp INSIGHT 2026与F5团队见面
F5很荣幸成为NetApp INSIGHT 2026的赞助商。本次活动于今天开幕,将在内华达州拉斯维加斯的MGM Grand持续至10月1日。我们的团队将在现场展示F5与NetApp联合架构,并与您探讨存储团队面临的数据路径问题,包括节点拥塞、TLS卸载、多站点故障转移,以及将AI数据集迁回本地环境。
欢迎莅临F5在NetApp INSIGHT的303号展位,并将我们的会议议程“数据交付为何至关重要,以及F5和NetApp如何助力打造弹性存储”添加到您的INSIGHT日程中。会议将于9月29日星期三14:30举行。期待在拉斯维加斯与您见面。
关于作者

相关博客文章
Thingbot正转变为攻击平台
Lori MacVittie重点介绍了F5 Labs对2018年1月至6月全球物联网设备攻击的研究,并指出了其中令人警醒的影响。物联网设备不仅持续遭到利用,还被转变为攻击平台,这意味着攻击者可以更充分地利用这个必然增长的市场。
借助F5全新Quick Start,在AWS上快速开展业务
在AWS re:Invent开幕前,我们很高兴与大家分享F5与AWS之间全新的Quick Start集成。F5的Tom Atkins将介绍该服务如何启动、配置和运行在AWS上部署工作负载所需的计算、网络、存储及其他AWS服务。