当前位置：首页|资讯|大语言模型|编程|ChatGPT|文心一言|通义千问

大语言模型综合能力测评报告2024

作者：InfoQ研究中心发布时间：2024-01-17
大语言模型编程ChatGPT文心一言通义千问

InfoQ 研究中心本研究围绕语义理解、文学创作、知识问答、逻辑推理、编程、上下文理解、语境感知、多语言处理及多模态交互等十大核心领域，对包括 ChatGPT-4、文心一言专业版、通义千问 V2.1.1、Bard2.0、讯飞星火 V3.0、Kimi Chat 网页版、百川大模型 V1.0、智谱清言网页版、360 智脑 4.0 和豆包在内的十款热门模型进行了全面评估，测试题目数量超过 3000 道。...【查看原文】

相关资讯

大语言模型综合能力测评报告 2023

InfoQ 研究中心选取语言模型准确性、数据基础、模型和算法的能力、安全和隐私四个大维度和 12 个细分维度，分别对ChatGPT、Claude、Sage、天工3.5、文心一言、通义千问、讯飞星火、Moss、ChatGLM、vicuna-13B进行了超过 3000+ 道题的评测。另外，本次研究特别关注了技术视角中大模型产品的编程能力，同时也专门设置了关于中文语境的特色测试题目， 如方言测试、中文特色推理、对对联等。InfoQ 研究中心希望可以通过本次测评帮助更多技术领域同仁获得对于中外大模型产品能力的逻辑认知，以帮助大家在 AGI 创业方向选择、工作实际应用等方面获得最新认知。

大语言模型天工大模型VicunaChatGPTClaude

InfoQ研究中心 2023-05-29

《大语言模型综合能力测评报告 2023》发布

InfoQ 研究中心选取语言模型准确性、数据基础、模型和算法的能力、安全和隐私四个大维度和 12 个细分维度，分别对ChatGPT、Claude、Sage、天工3.5、文心一言、通义千问、讯飞星火、Moss、ChatGLM、vicuna-13B进行了超过 3000+ 道题的评测。另外，本次研究特别关注了技术视角中大模型产品的编程能力，同时也专门设置了关于中文语境的特色测试题目， 如方言测试、中文特色推理、对对联等。InfoQ 研究中心希望可以通过本次测评帮助更多技术领域同仁获得对于中外大模型产品能力的逻辑认知，以帮助大家在 AGI 创业方向选择、工作实际应用等方面获得最新认知。

大语言模型天工大模型VicunaChatGPTClaude

InfoQ研究中心 2023-06-06

AI大模型专题：大语言模型能力测评报告2024（附下载）

该报告为《AI大模型专题：大语言模型能力测评报告2024》，共计43页，由极客传媒出品。报告指出，多家企业和机构按照相关规定完成备案和变更手续后，对公众全面开放，标志着大模型发展进入新阶段，加速推动大模型产业化应用。

AI大模型大语言模型

烟树晚雁 2024-01-23

《2023 大语言模型综合能力测评报告》出炉：以文心一言为代表的国内产品即将冲出重围

事实上，无论是中文创意写作，还是语义理解、中文知识问答，这些题目都主要反应的是大语言模型产品对文字的基础认知和学习能力，而我们从测评结果中清晰的看到，百度文心一言各方面数据表现优异，各项能力评分都位居Top2…

大语言模型文心一言百度

InfoQ 2023-05-29

InfoQ：大语言模型综合评测报告2023

近日国内与人工智能领域相关的利好政策陆续释放，中央召开的相关会议强调“未来要重视通用人工智能发展，营造创新生态。”《北京市促进通用人工智能创新发展的若干措施（2023-2025 年）（征求意见稿）》围绕五大方向提出 21 项具体措施，包括“开展大模型创新算法及关键技术研究”，“加强大模型训练数据采集及治理工具研发”等，同时面向政务服务、医疗、科学研究、金融、自动驾驶、城市治理等领域拓展应用场景，以抢抓大模型发展机遇，推动通用人工智能领域实现创新引领，中国大模型技术产业迎来了一波前所未有的发展契机，百度、阿

大语言模型人工智能医疗金融

郭太侠 2023-05-31

近期资讯

vivo Y200＋发布 骁龙4 Gen 2＋720P屏幕 1099元起

【CNMO科技消息】近日，CNMO注意到，vivo上线了一款vivoY200＋新机。高通骁龙4Gen2是高通旗下的入门级手机SoC，采用三星4nm工艺制程，CPU采用两颗性能核心+六颗能效核心组成的八核心方案。

手机中国 2024-12-27

王腾：没想到这波骁龙8 Gen3机型REDMI K80售价最高 销量最好

快科技12月27日消息，REDMI总经理王腾发文表示，回顾年底这一波骁龙8Gen3新机，没想到K80居然是起售价最高的那个，但也是产品力最强、性价比最高、销量最好的那个。据悉，REDMIK80起售价是2499元，同时集齐了2K直屏、超声波屏幕指纹、金属中框以及IP68级防尘防水，同档罕见。

快科技 2024-12-27

亚信科技斩获5项“星河”标杆案例，获评数据产业代表性厂商

日前，在中国通信标准化协会、中国信通院在京举办的2024数据资产管理大会上，亚信科技携广东、河南、重庆、河北和云南客户打造的相关项目分别获评大数据“星河”奖的“典型案例”“潜力案例”，亚信科技作为代表性厂商入选《数据治理产业图谱3.0》。

砍柴网 2024-12-27

网易武侠游戏《燕云十六声》PC 端公测今日开启

IT之家12月27日消息，网易武侠游戏《燕云十六声》PC端公测今日正式开启，首个赛季命名为“黄钟长鸣”赛季。至于移动端的上线时间，《燕云十六声》官方此前已确认其上线“距离PC公测不会相隔很久”。

IT之家 2024-12-27

民航无线电“安全卫士”：为每次飞行编织安全网

中新网云南新闻12月27日电(艾芯羽)当一架架飞机优雅地起降于跑道之上，这背后凝聚着一群默默付出、鲜为人知的专业人士——民航无线电管理检查员的辛勤与智慧。他们，如同飞行安全链上的隐形守护者，用专业和严谨，为每一次飞行编织起一张无形的通信安全网。晨曦初破，祥鹏航空无线电管理检查员刘丽娜和金家已经整装齐备，踏上了飞机的舷梯。

中国新闻网 2024-12-27

2024工业数字化转型案例发布会即将开幕

人民网北京12月27日电(记者王震)由国家制造强国建设战略咨询委员会指导，中国工业经济联合会联合十多家全国性行业联合会(协会)共同主办的“2024工业数字化转型案例发布会”(以下简称“发布会”)将于12月29日在北京举办。

金台资讯 2024-12-27

从“支付”到“智付” 数字人民币塑造消费新生态

拿出手机，在应用商城下载“数字人民币”APP，按照几个简单步骤就可以拥有一个“数币钱包”，走进上海的地铁、商店、消费等场所手机“碰一碰”，即可用数字人民币进行消费支付。如今，数字人民币“格外丝滑”的智能应用已经渗透到社会生活的多个方面，引领着消费方式革新。

光明网 2024-12-27

黄埔文冲科技成果入选“2024中国智能制造十大科技进展”

近日，2024智能制造科技进展交流专题活动在南京召开，会上发布了“2024世界智能制造十大科技进展”和“2024中国智能制造十大科技进展”。黄埔文冲“大型复杂结构数模驱动智能焊接自主化装备”经最终评审，入选“2024中国智能制造十大科技进展”，为我国船舶制造业向智能化、自主化发展提供了有效的解决方案。

国际船舶网 2024-12-27

联诚精密：下属子公司部分零件产品应用于工业机器人领域

联诚精密(002921)12月27日在互动平台表示，公司下属子公司的部分零件产品应用于工业机器人领域，人形机器人未来市场空间广阔，公司将积极研究探索人形机器人领域的业务发展机会。

证券时报 2024-12-27

乔治·斯穆特：科学的真正意义不在于答案，而在于不断提出问题｜比亚迪·封面对话诺奖得主

2006年，乔治·斯穆特因对宇宙微波背景辐射的突破性研究，揭示了宇宙起源的神秘面纱，从而获得诺贝尔物理学奖。

封面新闻 2024-12-27

推荐体验

AIGC重要产品

AI对话：类ChatGPT产品体验

好用的AI绘画工具

火热的AIGC产品

AIGC近期要闻

大公司发布的大模型产品都有哪些？

政府对AIGC的扶持政策

AIGC对就业的影响：我们会失业吗？

AIGC产业影响

AIGC对内容创作的影响

AIGC对绘画设计领域的影响

AIGC对各行各业的影响

Copyright © 2025 aigcdaily.cn  北京智识时代科技有限公司  版权所有  京ICP备2023006237号-1