中国电信联合发布国家级人工智能大模型服务能力成熟度评估标准
中国电信消息,中国电信联合清华大学等相关单位制定的《人工智能-大模型预训练模型-服务能力成熟度评估》标准,顺利通过工业和信息化部认证,成为国家级标准,并在工信部人工智能检验检测基础服务平台发布。标准为评估大模型能力水平提供了全面的检测手段,对行业大模型的发展具有重要意义。
标准提出了大模型预训练服务能力成熟度评估框架,规定了大模型预训练模型服务的能力要求、成熟度等级及评估方法。
在服务能力方面,预训练成熟度能力域包括平台、开发定制、推理及应用等服务,预训练大模型平台服务关注大模型开发定制的IT环境,模型开发定制服务关注大模型开发状态,模型推理及应用域关注大模型的运行状态。
在成熟度等级方面,模型服务成熟度等级划分为基础应用级、协同优化级、自定义生产级三类,对预训练模型基础技术、服务复杂度和定制化能力等要求逐步提高。
在评估方法方面,标准对预训练服务能力进行全面评估,提出各成熟等级应具备的预训练能力和关键性能指标,为大模型预训练服务能力建设提供指导。
以大模型为代表的新一轮人工智能技术是科技革命和产业变革的重要驱动力。中国电信持续加强核心技术攻关,重点推动基础通用大模型向垂直行业大模型的纵深演进,围绕教育、政务、农业、应急等行业领域,预计将发布精准教学大模型、政务服务大模型、神农一号大模型、应急大模型等共计40个行业大模型。