20:45NVIDIA AI@NVIDIAAINVIDIA 宣布与 Gcore 和 Orange Business 合作,基于 NVIDIA Dynamo 平台实现大规模分布式 AI 推理。该方案旨在解决高并发推理场景下的延迟和成本问题,通过分布式架构优化 GPU 利用率。合作方将共同为企业客户提供可扩展的推理基础设施,支持大模型在生产环境中的高效部署。此举标志着 NVIDIA 在 AI 推理领域从硬件向平台化生态的进一步延伸。AI产品NVIDIA Dynamo分布式推理GcoreOrange BusinessAI 基础设施9 个信源在谈推荐理由:分布式推理是当前大模型落地的关键瓶颈,NVIDIA 联合云服务商推出规模化方案,做 AI 部署和 MLOps 的团队值得关注,尤其是需要处理高并发推理的企业。原文