#GPU故障排查

1 stories · 1 in 7 days · 1 in 30 days
Stories, products and papers tagged "GPU故障排查", newest first.
Nov 12
How-toBuildersOfficial07:33
Chinese content在 Amazon SageMaker HyperPod 上检测与恢复静默数据损坏

大规模训练最怕的不报错的 GPU 静默故障,这篇 AWS 博客直接给你三段能塞进 PyTorch DDP 循环的检测代码,还能自动定位坏节点并触发 HyperPod 替换。跑多节点训练的工程师建议照着改一下自己的训练脚本。

Event
Primary sourceAWS Machine Learning Blog@Siddharth SengerSource