国内首个官方大模型评测结果出炉 四款国产大模型通过
2023-12-23 14:39:23 作者：姚立伟
近日，国内首个官方“大模型标准符合性评测”结果公布。阿里云、百度、360、腾讯四家企业旗下的大模型产品首批通过评测，这代表着他们在通用性、智能性等维度均达到了国家相关标准的要求。
根据公开资料，上述四家企业所拥有的大模型分别为通义千问、文心一言、360智脑和混元大模型。其中，通义千问是唯一一个开源的模型。此次“大模型标准符合性评测”由中国电子技术标准化研究院发起，并得到了学术界和产业界的广泛关注和支持。该评测共覆盖了38项具体评测维度，包括语言大模型的通用性和智能性的评估。
据阿里方面介绍，通义千问是本次通过的大模型中唯一的开源模型。自12月1日开放以来，通义千问72B已经登顶HuggingFace排行榜和上海人工智能实验室Open Compass榜单。
而腾讯方面则表示，他们的混元大模型符合《人工智能大规模与训练模型 第 2 部分：测评指标与方法》的语言大模型的相关技术要求。该模型拥有超千亿参数规模，并且预训练语料超过2万亿tokens。