四项核心维度居首:百度文心一言稳居国产大模型第一!
快科技3月27日消息,近日,全球增长咨询公司弗若斯特沙利文发布了《2024年中国大模型能力评测》,对国内主流的15个大模型进行了权威评测。
评测结果显示,百度、腾讯、阿里等互联网大厂旗下大模型位于第一梯队,综合表现相比初创企业更为优异。
其中百度文心一言稳居国产大模型首位,拿下数理科学、语言能力、道德责任、行业能力及综合能力等五大评测维度的四项第一。
据了解,本次评测维度包括通用基础能力和专业应用能力两大方面,综合考量数理科学、语言能力、道德责任、行业能力及综合能力等5大核心维度及21个细化二级维度。
整体而言,国际领先模型在通用基础能力和专业应用能力上略优于中国领先模型,但文心一言在通用基础能力评测中超越部分国际大模型。
沙利文还在报告中预测,2024年,大模型的技术发展将趋向多功能与小型化,同时产业端将强调自主研发和行业标准化,而伦理责任和数据标准规范将成为持续发展的关键。