Zephon 的 TorchTitan 集成：跨 GPU 规模恢复训练保持全局批次一致 2026-10-17 05:00:09 · ME 快讯 ME AI 消息，PyTorch 发布消息称，Zephon 的 TorchTitan 集成在不同 GPU 数量上恢复训练时能够保持全局批次完全一致。在最新博客的 1B 参数模型测试中，训练从 16-GPU 检查点恢复至 8、32 和 64 GPU，每个全局批次的 SHA-256 哈希值均匹配。该结果验证了跨不同 GPU 规模恢复训练时数据一致性的实现效果。（来源：InFoQ）