当前位置:首页|资讯

Sam Altman 最新访谈:o1 相当于推理模型的 GPT-2

作者:AppSo发布时间:2024-09-20

编者按:

最近的 T-Mobile Capital Markets Day 活动上,OpenAI CEO Sam Altman 现身现场。

除了必要的商业互吹,他也谈了谈 o1 和 AI 的发展路径,以及 OpenAI 为何总能遥遥领先。

省流版

o1 是第一个真正能够执行高级推理的系统,正处于推理模型的 GPT-2 阶段,未来几年发展到 GPT-4 的水平。

o1 将带来新的模型使用方式,和 GPT 系列模型非常不同,它不仅仅是聊天界面。

就像 ChatGPT 让 GPT-3.5 人尽皆知,o1 还需要时间磨合。

o1 的出现,实现了 AI 发展阶段的跨越,带来了更加陡峭的进步曲线。

OpenAI 的成功,是因为保持信念和专注,他们始终相信深度学习。

Sam Altman 看好 AI 在医疗、教育、科学方面的进展。

访谈原文(有删减)

Q:或许你可以向大家解释一下,o1 到底是什么?它真的很惊艳。

A:是的,我们对此感到非常兴奋,我们已经为此努力了很长时间。

GPT 系列模型在某种程度上擅长「系统一」思维,虽然这个说法不够精准。

我们真正想要的,是能够进行推理的系统。如果你能有一个可以处理更复杂问题的 AI,它的价值会非常大。

系统一:快速、直觉,适用于简单任务。 系统二:慢速、分析,适用于复杂任务。

我们已经在 GPT-4 中看到了冰山一角。但 o1 是第一个真正能够执行高级推理的系统。如果你给它一个困难的编程挑战、复杂的数学问题,或是你需要帮助的科学难题,你会得到非常出色的结果。

我们相信随着时间的推移,这将解锁巨大的潜力,它会和 GPT 系列一样重要,并且会带来一系列全新的、非常有价值的用途。

Q:我们现在看到的是预览版本 o1-preview,接下来的几个月会怎样发展?

A:我们正处于这类新型推理模型的 GPT-2 阶段。在未来几年里,你会看到它逐步发展到类似于 GPT-4 的水平。

但即便在接下来的几个月中,随着我们从 o1-preview 过渡到 o1,你也会看到它的显著改进,我们在发布 o1 的博客中分享了一些相关的指标。

这是一个巨大的进步,我认为新范式有个有趣的地方,它的进步曲线非常陡峭。当前模型不能解决的问题,几个月后你会发现它可以解决,再过几个月,它将解决更多问题。

进行更多强化学习,投入更多思考时间,o1 的性能持续提升

还有一点也很重要,我认为我们将会看到一整套新的模型使用方式。

当我们推出 GPT-3.5 时,它在 API 中已经存在了一段时间,但真正让它广泛使用的是 ChatGPT 的出现。即使那时,人们也花了一段时间才弄清楚如何使用 ChatGPT,而我们也花了一段时间去添加用户想要的功能。

所以,我认为 o1 现在还处于早期阶段。未来将会出现全新的使用方式,不仅仅是一个聊天界面。

我们会花时间去构建这些功能,其他人需要时间去开发这些功能,用户同样需要时间去探索如何使用。这和 GPT 系列模型非常不同。

五个发展阶段

我们之前谈到了 AI 的五个发展阶段,第一个阶段,聊天机器人;第二个阶段,也就是我们现在刚刚达到的,推理系统;第三阶段,AI 智能体;第四阶段,创新者,具备发现新科学信息的能力;第五阶段,完整的组织。

第一阶段到第二阶段的转变花了很长时间。但第二阶段可以相对较快地过渡到第三阶段。

Q:我们可以谈谈数据安全问题吗?我们让 OpenAI 深度参与,这些数据如何不会泄露到 T-Mobile 之外或被用来训练更广泛的模型?

A:大家对 OpenAI 有误解。OpenAI 并不会用 API 客户数据来训练模型。这是你们的数据,或者他们的数据。我们可以用这些数据为你们定制模型,或者你们可以在上下文中学习,甚至不需要在数据上对模型进行更多训练。这些数据并不会用于改进 OpenAI 的基础模型。

活动现场

Q:OpenAI 到底做了什么不同的事情,能够在这个领域取得如此快的进展,大规模地解放这些模型的潜力,改善用户体验,并提升商业成果?

首先感谢你的夸奖,这真的是很高的评价。

我们在前人大量的研究基础上前行,AI 是一个历史悠久的领域,很多人已经为此贡献了许多精彩的想法。不仅如此,回顾人类历史,发现半导体,制造芯片,建立网络和庞大的数据中心,我们只是站在这些工作的顶端,做了我们的一点贡献。但我们尽力做到最好,并且我们的研究非常专注。

其他研究项目会犯一个常见错误,他们缺乏足够的信念和专注。一旦某件事有效了,复制它是很容易的。

我认为成功有两种途径,一是快速的跟随,复制 OpenAI 或其他成功的做法,我并不是在贬低什么,很多公司擅长在看到什么方法有效之后,把执行工作做得非常好。但如果你想推动前沿,这就非常困难了。二是保持信念和专注,特别是在一个非常复杂的环境中,这是最好的路径。

物是人非

我们相信深度学习,这是我们的赌注。我们相信以我们现在的水平,走向 AGI 及更远的未来。我们会根据学到的新事物进行纠正,我们将继续尽我们所能,尝试做下一件摆在我们面前的事情,并相信随着时间的推移,它们会累积起来。

Q:这次和 T-Mobile 的合作,代表了 OpenAI 正在某些领域加倍投入。但我知道你们对其他领域也很感兴趣,你能谈谈医疗等其他让你感到兴奋的项目吗?

A:首先,T-Mobile 是我们最重要的合作伙伴之一,我们希望这次合作能激励更多人看到 AI 能为客户带来的巨大价值。

正如你提到的,医疗是一个我翘首以盼的领域。世界上大多数人无法获得优质的医疗服务。我非常期待看到有人利用这些模型,构建最出色的 AI 医疗顾问,并广泛推广。

OpenAI 和可汗学院有合作

教育是另一个领域,我们已经看到了一些很好的成果。o1 也才上线五六天,但人们已经用它做了很多了不起的事情。过去用 GPT-4 实现的事情也相当不错。想象一下,如果每个学生都能获得量身定制的辅导,加上其他的教育体验,会带来什么变化。

我个人非常兴奋的一个领域,尽管它还在未来,但我已经看到了曙光:AI 加速科学发现的能力。

我相信,世界上大多数真正可持续的经济增长、生活质量的改善,都很大程度上依赖于科学进步和技术进步。如果 AI 能加速这一过程,帮助我们发明新事物、治愈疾病、找到更好的能源来源,那将是巨大的胜利


Copyright © 2024 aigcdaily.cn  北京智识时代科技有限公司  版权所有  京ICP备2023006237号-1