Zephon集成TorchTitan实现弹性确定性数据加载

2026年10月17日，PyTorch团队联合Zephon正式推出名为Zephon的弹性确定性数据加载器，并将其集成至TorchTitan框架中。该工具旨在优化大规模模型训练中的数据管理流程。根据报道，Zephon允许在训练过程中实时执行数据混合、打包和洗牌操作，无需预先在磁盘上生成数据副本。这一机制显著降低了存储开销，提升了数据加载的灵活性与效率。目前，该功能已作为TorchTitan的一部分发布，为开发者提供了更高效的训练数据处理方案。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。