07:41AWS Machine Learning Blog@Apoorva Chandra精选Amazon SageMaker AI 提供全托管实时推理,支持单模型端点(SME)和推理组件(IC)两种架构。通过 CloudWatch 详细指标和 Insights 仪表盘,用户可监控生成式 AI 推理的延迟、吞吐量等关键指标。该仪表盘支持自定义视图和异常检测,帮助快速定位性能瓶颈。SME 和 IC 端点均能集成此观测能力,适用于生产环境的调试与优化。技巧SageMakerCloudWatch生成式 AI推理监控与调试推荐理由:AWS 教你用 CloudWatch 盯着 SageMaker 上的生成式 AI 推理,有详细指标和仪表盘,调性能抓问题都好使。原文
13:33IT之家(博客/媒体)83°英伟达在财报电话会议上宣布,下一代超级 AI 芯片 Vera Rubin 将于 2026 年下半年推出,第三季度开始交付,第四季度加速上量。黄仁勋表示,所有前沿模型公司都会选择 Vera Rubin,其开局优于 Blackwell,因此肯定更成功。首批客户包括微软、谷歌、亚马逊、Meta 和甲骨文等。台积电已基于 3nm 制程量产该芯片,富士康等合作伙伴将在下半年全面量产。Vera Rubin AI 服务器机柜价值约 1.8 亿美元,配备强大软件生态。AI产品英伟达Vera RubinAI 芯片推理数据中心推荐理由:英伟达下一代 AI 芯片 Vera Rubin 将推动推理和训练性能飞跃,做 AI 基础设施的团队值得关注其交付节奏和生态支持。原文