开启全民超能！微软开源Deep Speed Chat，成本大大降低，速度提升15倍

原标题：开启全民超能！微软开源Deep Speed Chat，成本大大降低，速度提升15倍

人人拥有ChatGPT的时代来临了。

当地时间4月12日，微软宣布开源DeepSpeed-Chat，帮助用户轻松训练类ChatGPT等大语言模型，人人都有望拥有专属ChatGPT。

据悉，这是一个免费的开源解决方案和框架，专为使用 RLHF 训练高质量 ChatGPT 风格模型而设计。它简单、快速且成本极低，适用于各种客户，包括学校科研、初创公司和大规模云训练。相较于 SoTA，它的速度提升了15倍，可以在单个 GPU 上训练 10B+ 的模型大小，以及在多 GPU 系统上训练 100B+ 的模型大小。

截至美股12日收盘，微软报收283.49美元，微涨0.23%，总市值2.11万亿美元。

成本大大降低，速度提升15倍

近来，ChatGPT 及类似模型引发了 AI 行业的一场风潮。而ChatGPT只用了几个月的时间便席卷全球，成为史上用户增长速度最快的消费级应用，对世界的经济发展、科技研发起到了重要的推动作用。很多企业、个人用户纷纷想参与到这场AI技术变革中，但由于庞大的资源、资金投入只能望而却步。

即便开源领域推出了LLaMa、Alpaca、Vicuna、Databricks-Dolly等优秀的类ChatGPT项目，仍缺乏一个支持端到端的基于RLHF的规模化系统，使得训练强大的类ChatGPT模型非常艰难。

现在，通过Deep Speed Chat解决资源、算法等难题，轻松、高效的训练数千亿参数的最先进的类ChatGPT模型。

据悉，其是基于微软 Deep Speed 深度学习优化库开发而成，具备训练、强化推理等功能，还使用了 RLHF（基于人类反馈的强化学习）技术，可将训练速度提升 15 倍以上，而成本却大大降低。

为了实现无缝的训练体验，微软在 DeepSpeed-Chat 中整合了一个端到端的训练流程，包括以下三个主要步骤：

图｜DeepSpeed-Chat 的具有可选功能的 RLHF 训练流程图（来源：GitHub）

实操情况，一个 130 亿参数的类 ChatGPT 模型，训练时间只需要 1.25 小时，使 RLHF 训练快速且经济实惠。

例如，DeepSpeed-HE 在 Azure 云上只需 9 小时即可训练一个 OPT-13B 模型，只需 18 小时即可训练一个 OPT-30B 模型。这两种训练分别花费不到 300 美元和 600 美元。

总而言之，用户通过Deep Speed Chat提供的“傻瓜式”操作，能以最短的时间、最高效的成本训练类ChatGPT大语言模型，这标志着一个人手一个ChatGPT的时代要来了。

微软此次开源Deep Speed Chat就像当年的互联网，为了提升发展速率降低了台式机的价格，使得普通用户也能拥有自己的电脑。

只有参与的用户多了，整个行业生态才能快速壮大发展，所以，微软此次开源对整个ChatGPT生态发展起到了至关重要的推动作用，使得人人都能拥有自己的ChatGPT。

业内人士也指出，目前，ChatGPT处于初级发展阶段，存在安全隐患、数据隐私、道德等问题。相信随着参与用户的增多，这些难题将会被有效的解决，从而为全球经济发展做出贡献。