近日,全球知名增长咨询公司弗若斯特沙利文发布了《2024年中国大模型能力评测》,对国内15个主流大模型进行了全面而权威的评估。该评测涵盖了通用基础能力和专业应用能力两大核心领域,深入探究了数理科学、语言能力、道德责任、行业能力及综合能力等五大维度,并进一步细化了21个二级评估指标。
报告结果显示,百度、腾讯、阿里等科技巨头旗下的大模型表现抢眼,位列第一梯队,展现出相较于初创企业更加卓越的综合实力。其中,百度文心一言在国产大模型中脱颖而出,荣获数理科学、语言能力、道德责任、行业能力及综合能力等四大评测维度的冠军。
值得注意的是,尽管国际领先模型在通用基础能力和专业应用能力上稍占优势,但百度文心一言在通用基础能力方面的表现已超越部分国际知名大模型,显示出中国在大模型研发领域的显著进步和强劲实力。
此外,沙利文在报告中还预测了未来大模型技术的发展趋势。预计2024年,大模型将朝着多功能与小型化的方向发展,同时产业界将更加注重自主研发和行业标准化。在此过程中,伦理责任和数据标准规范将成为推动大模型技术持续健康发展的关键因素。