当前位置:首页|资讯|AIGC

2023 AIGC应用app智能化评测报告

作者:极光JIGUANG发布时间:2024-03-14

原标题:2023 AIGC应用app智能化评测报告

引言:国内AI大模型行业发展进入快车道,市面AIGC产品众多,底层技术和产品功能快速迭代,为此月狐数据推出AIGC应用app智能化评估体系,通过5个一级指标以及23个二级指标量化评估现有主流AIGC应用产品的底层技术以及使用体验能力。

目录

01 研究背景与评估体系介绍

02 评估结果与案例展示

03 趋势与展望

PART 01研究背景与评估体系介绍

研究背景:AIGC产品快速迭代,普及率持续提升

  • 2023年AI大模型迎来创新浪潮,各大厂商密集推出和迭代基于大模型的AIGC应用产品,应用场景覆盖AI对话、写作、学习、媒体创作、办公商务等领域,满足用户多功能需求
  • 与此同时,用户对于AIGC产品的使用兴趣度不断提升,生成式AI普及范围持续扩大,数据显示,截止2023年12月,生成式AI移动应用全网安装渗透率达6.7%,MAU已超2000万,其中文心一言、天工、讯飞星火、豆包等主流app产品用户规模呈现快速增长态势

AIGC应用app智能化评估体系介绍

  • 目前市面AIGC产品众多,且底层技术和产品功能的更新迭代速度较快,为此本报告推出AIGC应用app智能化评估体系,旨在通过量化指标测量AIGC应用产品在技术能力、使用体验上的优势,帮助广大用户更直观地了解和选择AIGC产品
  • AIGC应用app智能化评估体系由基础能力、使用体验、生成质量、智能体能力、安全合规5个一级指标以及23个二级指标构成,其中智能体能力是我们基于大模型技术的最新发展趋势所增设的评测维度,智能体是指以AI为核心构建的一个集合立体感知、全域协同、精准判断、持续进化等特征的智能系统,是各家大模型厂商目前着重布局的应用场景,基于智能体功能用户可以按照自己的需求打造出更具个性化的AIGC方案,因此加入智能体能力评测指标,一方面能够更加全方位地测量AIGC应用产品的能力,除了大模型的底层能力之外,也能测量到大模型技术的应用场景落地能力,另一方面能够直观体现国产大模型的最新发展进程

AIGC应用app智能化指数评估方法

PART 02 评估结果与案例展示

AIGC应用app智能化综合评估结果

  • 评估结果显示,文心一言app智能化综合指数位居第一,其次是讯飞星火app、豆包app等
  • 拆分二级指标来看,文心一言app在基础能力、安全合规、使用体验、生成质量、智能体能力各方面表现突出,除此之外,通义千问、智谱清言app在基础能力方面也相对领先,讯飞星火、天工app在安全合规方面也展现出较明显的优势

AIGC应用app基础能力表现

AIGC应用app文生图能力案例展示

AIGC应用app使用体验表现

AIGC应用app生成质量表现

  • 各家app在不同类型的内容生成上各有优势,其中文心一言app在逻辑推理、多轮行程规划、情感对话、角色扮演等场景下生成的内容质量更好,而通义千问app更擅长创意写作,在多轮行程规划场景上也有较好的表现,讯飞星火和360智脑app则在数学计算上表现突出,智谱清言app在专业知识问答、情商问答场景上获得最高分,豆包、360智脑app在专业知识问答上的表现也相对较强

AIGC应用app生成质量案例展示—逻辑与推理

AIGC应用app生成质量案例展示—多轮行程规划

AIGC应用app生成质量案例展示—角色扮演

AIGC应用app生成质量案例展示—创意写作

AIGC应用app生成质量案例展示—情商问答

AIGC应用app智能体能力表现

  • 随着各大厂商积极开发和迭代智能体功能,2023年各应用智能体的能力在内容契合和个性化方面取得了质的提升;2024年初,智能体能力在“交互沉浸”和“角色还原”方面实现进一步创新,产生较多具有沉浸态和数字生命形态的智能体,如2024春节期间,文心一言app推出了AI费翔智能体,给用户带来高度沉浸的交互体验

AIGC应用app智能体能力案例展示

AIGC应用app安全合规表现

AIGC应用app对不合规问题回应案例展示

PART 03 趋势与展望

AIGC应用发展趋势

报告说明

1.数据来源

1)月狐iAPP(MoonFox iApp),基于极光云服务平台的行业数据及月狐iAPP平台针对各类移动应用大数据的挖掘,并结合大样本算法开展的数据统计与分析;2)月狐iBrand(MoonFox iBrand),基于全面品牌洞察方案,对门店客流、店铺数、销量、用户画像等多维度数据进行统计与分析;3)月狐iMarketing(MoonFox iMarketing),基于自有移动端大数据和用户画像标签,对人群社会属性、地理位置、轨迹特征、线上行为偏好等多维度数据进行统计与分析;4)月狐调研数据,通过月狐调研平台进行网络调研;5)其他合法收集的数据。以上均系依据相关法律法规,经用户合法授权采集数据,同时经过对数据脱敏后形成大数据分析报告。

2.数据周期

报告整体时间段:2023年07月-2023年12月。

3.数据指标说明

具体数据指标请参考各页标注。

4.免责声明

月狐数据MoonFox Data所提供的数据信息系依据大样本数据抽样统计、小样本调研、数据模型预测及其他研究方法估算、分析得出。由于统计分析领域中的任何数据来源和技术方法均存在局限性,月狐数据MoonFox Data也不例外。月狐数据MoonFox Data依据上述方法所估算、分析得出的数据信息仅供参考,月狐数据MoonFox Data不对上述数据信息的精确性、完整性、适用性和非侵权性做任何保证。任何机构或个人援引或基于上述数据信息所采取的任何行动所造成的法律后果均与月狐数据MoonFox Data无关,由此引发的相关争议或法律责任皆由行为人承担。

5.报告其他说明

月狐数据研究院后续将利用自身的大数据能力,对各领域进行更详尽的分析解读和商业洞察,敬请期待。

6.版权声明

本报告为月狐数据MoonFox Data所作,报告中所有的文字、图片、表格均受相关的商标和著作权的法律所保护,部分内容采集于公开信息,所有权为原著作者所有。未经本公司书面许可,任何组织和个人不得以任何形式复制或传递。任何未经授权使用本报告的相关商业行为都将违反《中华人民共和国著作权法》和其他法律法规的规定。


Copyright © 2024 aigcdaily.cn  北京智识时代科技有限公司  版权所有  京ICP备2023006237号-1