已收录文章摘要,完整内容可前往原文阅读。
(本文阅读时间:16 分钟)同样的模型、同样的输入、同样的随机种子,换一块 GPU 运行,结果却可能不一样。在大模型时代,这类数值差异不只是工程上的小麻烦,还可能影响模型质量、实验可复现性和训练稳定性