DeepSpeed-Chat 是微软开源的一个快速、经济且可扩展的系统框架，用于训练类似 ChatGPT 的高质量模型。它基于 DeepSpeed 技术，支持端到端的强化学习人类反馈（RLHF）训练流程，包括监督微调、奖励模型微调和基于人类反馈的强化学习。DeepSpeed-Chat 提供一键式训练体验，用户只需一个脚本即可完成从预训练模型到生成自定义 ChatGPT 模型的全过程。此外，它还整合了 DeepSpeed 的训练和推理能力，形成统一的混合引擎，显著提升了训练速度，比现有 RLHF 系统快 15 倍。