来源:财联社
作者:黄君芝
担心人工智能(AI)会抢走他们工作的华尔街分析师们,现在可以松一口气了。
一项最新研究显示,ChatGPT无法通过特许金融分析师(CFA)考试——这是华尔街许多金融专业人士的基准资格。在由摩根大通AI研究人员和大学学者组成的团队进行的研究中,ChatGPT和GPT-4被问及CFA相关问题,以测试它们是否能够进行复杂的金融推理。
研究人员写道:“根据估计的通过率和平均自我报告分数,我们得出结论,ChatGPT可能无法在所有测试环境下通过CFA一级和二级考试。”
CFA是一个严格的三部分测试,旨在衡量证券分析和投资组合管理的知识。专业人士需要数年时间才能完成所有三个级别的考试,考生通常要投入数百小时的准备时间。一旦获得认证,它就被认为是一种与众不同的标志,并且可以在整个职业生涯中为接受者提供更多的机会。
许多参加考试的人都失败了。根据CFA协会的数据,在2023年2月参加一级考试的考生中,只有38%通过了考试。52%的人通过了5月份的二级考试。8月份最近一次三级考试的通过率为47%。
根据这项研究,当被问及涉及大量选择题的模拟一级问题时,ChatGPT犯了许多“基于知识的错误”,研究人员将其定义为“模型缺乏回答问题所需的关键知识的错误”。GPT-4也犯了同样的基于知识的错误,但它们没有ChatGPT那么糟糕。
一级测试通常比二级更难,但这些模型在二级测试中的表现却更差,二级测试需要对股权投资和财务报告等方面的信息进行更多的分析和解读。
总体而言,GPT-4在这两个级别上都比ChatGPT表现得更好。事实上,如果提示足够充分,它的表现足以通过CFA考试的前两个级别。研究人员写道:“如果有提示,GPT-4将有相当大的机会通过CFA一级和二级考试。”
可以肯定的是,自然语言处理,或软件理解和操纵人类语言的能力,已经在金融的几个领域得到了应用,比如情绪分析或总结报告。
但随着ChatGPT等人工智能大型语言模型的发展,人工智能取代人类金融专业人士的问题已经成为华尔街讨论的热门话题。今年早些时候,ChatGPT因其类似人类的反应而引起了巨大轰动。
幸运的是,目前这种情况似乎还远未成为现实。