跳转到内容

算力与实验管理

如何在有限 GPU 上安排实验队列、并行多个种子、用实验管理工具(W&B、MLflow)记录指标与产物、以及定期清理与归档。本章还讨论算力不足时的策略:小模型代理、缩短训练、复用公开检查点。

  • 实验队列应能无人值守运行
  • 每个实验有唯一 ID 并与论文表格对应
  • 算力受限时先证明趋势再放大