当前位置：首页|资讯|大语言模型|编程|ChatGPT|文心一言|通义千问

大语言模型综合能力测评报告2024

作者：InfoQ研究中心发布时间：2024-01-17
大语言模型编程ChatGPT文心一言通义千问

InfoQ 研究中心本研究围绕语义理解、文学创作、知识问答、逻辑推理、编程、上下文理解、语境感知、多语言处理及多模态交互等十大核心领域，对包括 ChatGPT-4、文心一言专业版、通义千问 V2.1.1、Bard2.0、讯飞星火 V3.0、Kimi Chat 网页版、百川大模型 V1.0、智谱清言网页版、360 智脑 4.0 和豆包在内的十款热门模型进行了全面评估，测试题目数量超过 3000 道。...【查看原文】

相关资讯

大语言模型综合能力测评报告 2023

InfoQ 研究中心选取语言模型准确性、数据基础、模型和算法的能力、安全和隐私四个大维度和 12 个细分维度，分别对ChatGPT、Claude、Sage、天工3.5、文心一言、通义千问、讯飞星火、Moss、ChatGLM、vicuna-13B进行了超过 3000+ 道题的评测。另外，本次研究特别关注了技术视角中大模型产品的编程能力，同时也专门设置了关于中文语境的特色测试题目， 如方言测试、中文特色推理、对对联等。InfoQ 研究中心希望可以通过本次测评帮助更多技术领域同仁获得对于中外大模型产品能力的逻辑认知，以帮助大家在 AGI 创业方向选择、工作实际应用等方面获得最新认知。

大语言模型天工大模型VicunaChatGPTClaude

InfoQ研究中心 2023-05-29

《大语言模型综合能力测评报告 2023》发布

InfoQ 研究中心选取语言模型准确性、数据基础、模型和算法的能力、安全和隐私四个大维度和 12 个细分维度，分别对ChatGPT、Claude、Sage、天工3.5、文心一言、通义千问、讯飞星火、Moss、ChatGLM、vicuna-13B进行了超过 3000+ 道题的评测。另外，本次研究特别关注了技术视角中大模型产品的编程能力，同时也专门设置了关于中文语境的特色测试题目， 如方言测试、中文特色推理、对对联等。InfoQ 研究中心希望可以通过本次测评帮助更多技术领域同仁获得对于中外大模型产品能力的逻辑认知，以帮助大家在 AGI 创业方向选择、工作实际应用等方面获得最新认知。

大语言模型天工大模型VicunaChatGPTClaude

InfoQ研究中心 2023-06-06

AI大模型专题：大语言模型能力测评报告2024（附下载）

该报告为《AI大模型专题：大语言模型能力测评报告2024》，共计43页，由极客传媒出品。报告指出，多家企业和机构按照相关规定完成备案和变更手续后，对公众全面开放，标志着大模型发展进入新阶段，加速推动大模型产业化应用。

AI大模型大语言模型

烟树晚雁 2024-01-23

《2023 大语言模型综合能力测评报告》出炉：以文心一言为代表的国内产品即将冲出重围

事实上，无论是中文创意写作，还是语义理解、中文知识问答，这些题目都主要反应的是大语言模型产品对文字的基础认知和学习能力，而我们从测评结果中清晰的看到，百度文心一言各方面数据表现优异，各项能力评分都位居Top2…

大语言模型文心一言百度

InfoQ 2023-05-29

InfoQ：大语言模型综合评测报告2023

近日国内与人工智能领域相关的利好政策陆续释放，中央召开的相关会议强调“未来要重视通用人工智能发展，营造创新生态。”《北京市促进通用人工智能创新发展的若干措施（2023-2025 年）（征求意见稿）》围绕五大方向提出 21 项具体措施，包括“开展大模型创新算法及关键技术研究”，“加强大模型训练数据采集及治理工具研发”等，同时面向政务服务、医疗、科学研究、金融、自动驾驶、城市治理等领域拓展应用场景，以抢抓大模型发展机遇，推动通用人工智能领域实现创新引领，中国大模型技术产业迎来了一波前所未有的发展契机，百度、阿

大语言模型人工智能医疗金融

郭太侠 2023-05-31

近期资讯

2024飞猪“囤旅游”预订量同比增超20%：00后增速最快！

快科技12月30日消息，今日，飞猪发布了《2024年“囤旅游”报告》（以下简称《报告》）。《报告》显示，截至目前，2024年“囤旅游”商品预订量同比增长超20%。在2024年&ld

秋白 2024-12-30

国产CPU之光！10年卖1000万颗、九译二进制跑2+万软件

快科技12月30日消息，在一众国产CPU处理器中，飞腾已经走过整整10年，而截至2024年底，飞腾CPU的总销量突破了1000万颗！根据官方公布的数据，飞腾公司2024年收入超过20亿元，同比增长5％，研发

上方文Q 2024-12-30

春节吉言罐包装：王老吉凉茶2.49元/罐速囤（商超4元）

元旦过节必备，天猫王老吉旗舰店，王老吉凉茶植物饮料310ml*12罐日常售价44.9元，今日下单立减12元。叠加3元优惠券，实付到手价29.9元，约合2.49元/罐。经典红罐包装、吉言罐包装随机发货，

小晖 2024-12-30

铠侠VD10固态硬盘上市：2TB首发1299元 最大读速10000 MB/s

快科技12月30日消息，铠侠全新消费级固态硬盘EXCERIA PLUS G4 VD10 SSD目前已上市，1TB首发799元，2TB首发1299元。据悉，EXCERIA PLUS G4 VD10搭载了铠侠的BiCS FLASH 3D闪存，使用PCIe 5.0 x

鹿角 2024-12-30

曝剪映两位负责人离职 ：曾带领产品月活用户超8亿

快科技12月30日消息，据媒体综合报道，近日，传字节跳动旗下剪映产品负责人张逍然和技术负责人王学智已离职。据了解，此次被传离职的剪映产品负责人张逍然，自2021年底起，开始负责剪映、醒图

秋白 2024-12-30

不加长能否热销：奔驰E级标准轴距版上市 起售价45.92万元

快科技12月30日消息，2025款奔驰E级标准轴距版已正式上市。该车提供E 260运动版、E 300时尚型运动版和E 300豪华型运动版三款配置，售价分别为45.92万元、51.32万元和56.42万元。新车外观和

王略 2024-12-30

iPhone 17/17 Air即将量产：这摄像头造型引发争议

快科技12月30日消息，博主定焦数码暗示，iPhone 17和iPhone 17 Air的后摄模组都是采用“条形跑道”设计，与谷歌Pixel 9系列相机DECO类似。他还透露，iPhone 17和iPhone 17 Air下个月

振亭 2024-12-30

反转！因"差评"怼中国玩家开发者道歉

近日，独立游戏开发者@ko_dll因在推特上抱怨其Steam游戏《BZZZT》因未添加中文而遭到中国玩家刷差评一事，引发了玩家群体的广泛讨论。他曾表示，以差评要求本地化是“敲诈勒索”行为

2024-12-30

余承东亲测享界S9“车位到车位”智驾：自己全程啥也没干

快科技12月30日消息，近日，搭载了华为乾崑ADS 3.0智驾系统的智能汽车已经陆续OTA升级最新的“车位到车位”新版本，华为车BU董事长余承东就亲自体验了一番，并称自己全程啥也没干。

落木 2024-12-30

要买先等等！DRAM内存明年Q1降价13%

快科技12月30日消息，根据市场研究机构TrendForce的最新调查，2025年第一季度DRAM内存价格将继续下降。由于智能手机等消费型产品需求的持续萎缩，以及笔记本电脑等产品担心关税问题而提前备货

黑白 2024-12-30

推荐体验

AIGC重要产品

AI对话：类ChatGPT产品体验

好用的AI绘画工具

火热的AIGC产品

AIGC近期要闻

大公司发布的大模型产品都有哪些？

政府对AIGC的扶持政策

AIGC对就业的影响：我们会失业吗？

AIGC产业影响

AIGC对内容创作的影响

AIGC对绘画设计领域的影响

AIGC对各行各业的影响

Copyright © 2026 aigcdaily.cn  北京智识时代科技有限公司  版权所有  京ICP备2023006237号-1