DeepSpeed
  • 训练设置
  • 推理设置
  • Training API
  • Inference API
  • 模型检查点
  • 激活检查点
  • ZeRO
  • 专家混合模型 (MoE)
  • Transformer Kernels
  • 管道并行
  • 优化器
  • 学习率调度器
  • Flops Profiler
  • 自动调优
  • 内存需求
  • 监控
DeepSpeed
  • Search


© 版权所有 2020, Microsoft.

Built with Sphinx using a theme provided by Read the Docs.