当前位置：首页|资讯|大语言模型|编程|ChatGPT|文心一言|通义千问

大语言模型综合能力测评报告2024

作者：InfoQ研究中心发布时间：2024-01-17
大语言模型编程ChatGPT文心一言通义千问

InfoQ 研究中心本研究围绕语义理解、文学创作、知识问答、逻辑推理、编程、上下文理解、语境感知、多语言处理及多模态交互等十大核心领域，对包括 ChatGPT-4、文心一言专业版、通义千问 V2.1.1、Bard2.0、讯飞星火 V3.0、Kimi Chat 网页版、百川大模型 V1.0、智谱清言网页版、360 智脑 4.0 和豆包在内的十款热门模型进行了全面评估，测试题目数量超过 3000 道。...【查看原文】

相关资讯

大语言模型综合能力测评报告 2023

InfoQ 研究中心选取语言模型准确性、数据基础、模型和算法的能力、安全和隐私四个大维度和 12 个细分维度，分别对ChatGPT、Claude、Sage、天工3.5、文心一言、通义千问、讯飞星火、Moss、ChatGLM、vicuna-13B进行了超过 3000+ 道题的评测。另外，本次研究特别关注了技术视角中大模型产品的编程能力，同时也专门设置了关于中文语境的特色测试题目， 如方言测试、中文特色推理、对对联等。InfoQ 研究中心希望可以通过本次测评帮助更多技术领域同仁获得对于中外大模型产品能力的逻辑认知，以帮助大家在 AGI 创业方向选择、工作实际应用等方面获得最新认知。

大语言模型天工大模型VicunaChatGPTClaude

InfoQ研究中心 2023-05-29

《大语言模型综合能力测评报告 2023》发布

InfoQ 研究中心选取语言模型准确性、数据基础、模型和算法的能力、安全和隐私四个大维度和 12 个细分维度，分别对ChatGPT、Claude、Sage、天工3.5、文心一言、通义千问、讯飞星火、Moss、ChatGLM、vicuna-13B进行了超过 3000+ 道题的评测。另外，本次研究特别关注了技术视角中大模型产品的编程能力，同时也专门设置了关于中文语境的特色测试题目， 如方言测试、中文特色推理、对对联等。InfoQ 研究中心希望可以通过本次测评帮助更多技术领域同仁获得对于中外大模型产品能力的逻辑认知，以帮助大家在 AGI 创业方向选择、工作实际应用等方面获得最新认知。

大语言模型天工大模型VicunaChatGPTClaude

InfoQ研究中心 2023-06-06

AI大模型专题：大语言模型能力测评报告2024（附下载）

该报告为《AI大模型专题：大语言模型能力测评报告2024》，共计43页，由极客传媒出品。报告指出，多家企业和机构按照相关规定完成备案和变更手续后，对公众全面开放，标志着大模型发展进入新阶段，加速推动大模型产业化应用。

AI大模型大语言模型

烟树晚雁 2024-01-23

《2023 大语言模型综合能力测评报告》出炉：以文心一言为代表的国内产品即将冲出重围

事实上，无论是中文创意写作，还是语义理解、中文知识问答，这些题目都主要反应的是大语言模型产品对文字的基础认知和学习能力，而我们从测评结果中清晰的看到，百度文心一言各方面数据表现优异，各项能力评分都位居Top2…

大语言模型文心一言百度

InfoQ 2023-05-29

InfoQ：大语言模型综合评测报告2023

近日国内与人工智能领域相关的利好政策陆续释放，中央召开的相关会议强调“未来要重视通用人工智能发展，营造创新生态。”《北京市促进通用人工智能创新发展的若干措施（2023-2025 年）（征求意见稿）》围绕五大方向提出 21 项具体措施，包括“开展大模型创新算法及关键技术研究”，“加强大模型训练数据采集及治理工具研发”等，同时面向政务服务、医疗、科学研究、金融、自动驾驶、城市治理等领域拓展应用场景，以抢抓大模型发展机遇，推动通用人工智能领域实现创新引领，中国大模型技术产业迎来了一波前所未有的发展契机，百度、阿

大语言模型人工智能医疗金融

郭太侠 2023-05-31

近期资讯

三杯齐发！OPPO Find X8新机曝光：要玩机海战术？

作为「超大杯」，OPPOFindX8Ultra自然要搭载高通骁龙8至尊版芯片。但在数码闲聊站的最新爆料中，OPPO预计在明年上半年退出至少三款FindX8系列的新机，除OPPOFindX8Ultra之外，还有首发天玑9400+的FindX8S和X8mini。

雷科技 2024-12-26

游戏体验天花板，一加 Ace 5 系列售价 2299 元起

2024年12月26日,一加正式发布游戏体验天花板一加Ace5系列——一加Ace5及一加Ace5Pro。一加Ace5系列深度聚焦性能和游戏体验,搭载骁龙8系旗舰平台和行业首个自研芯片级游戏技术「风驰游戏内核」,带来持久满帧的流畅游戏体验。一加Ace5Pro售价3399元起,一加Ace5售价2299元起。

砍柴网 2024-12-26

华菱线缆：公司开发工业机器人用电线电缆并实现成果转化

12月26日，华菱线缆发布投资者关系活动记录表，公司开发工业机器人用电线电缆并实现成果转化。未来，将继续推进智能机器人等领域的线缆业务推广与合作。

每日经济新闻 2024-12-26

美学+制造深度融合！东莞“制造美学”IP火爆出圈

12月26日，“东莞制造美学”课题研究成果发布会在莞举行，正式发布《“东莞制造美学”课题研究报告》，作为全国首提“制造美学”概念的城市，未来“制造美学”将成为推动东莞制造业高质量发展的强大动力，也将为中国乃至全球制造业的转型升级提供有益的借鉴和启示。

南方都市报 2024-12-26

石头科技获得实用新型专利授权：“清洗盘和清洁基站”

证券之星消息，根据天眼查APP数据显示石头科技（688169）新获得一项实用新型专利授权，专利名为“清洗盘和清洁基站”，专利申请号为CN202323657407.5，授权日为2024年12月27日。专利摘要：本实用新型提供了一种清洗盘和清洁基站，属于扫地机自动清洁技术领域，用于解决清洗盘表面易残留脏污的问题。

证券之星 2024-12-27

中国科大揭示火星核幔分异之谜：远超预期的高温高压环境塑造红色星球

12月26日消息，中国科学技术大学李云国教授团队宣布取得一项重要研究突破，相关研究成果已于12月1日发表在《科学通报》上。研究团队利用第一性原理自由能计算，揭示了火星内核和地幔分离（核幔分异）的过程，并发现这一过程发生在远高于先前估计的高温高压环境下。这项研究对理解火星的内部结构和长期演化，乃至其他类地行星的演化，都具有重大意义。

IT之家 2024-12-26

三旺通信获得实用新型专利授权：“一种本质安全电源防护电路和电气设备”

证券之星消息，根据天眼查APP数据显示三旺通信（688618）新获得一项实用新型专利授权，专利名为“一种本质安全电源防护电路和电气设备”，专利申请号为CN202420099883.5，授权日为2024年12月27日。专利摘要：本申请涉及本质安全电源保护电路领域，公开了一种本质安全电源防护电路和电气设备。

证券之星 2024-12-27

雷神 CES 2025 笔记本电脑新品预热：新型“RGB”散热系统

IT之家12月26日消息，雷神科技THUNDEROBOT宣布将参加明年1月初在美国拉斯维加斯举行的CES2025展会，这也将是该品牌首度参展CES。雷神官方今日预热了一款出乎意料的新技术，从海报来看应该是指新一代笔记本电脑的散热系统，号称“新一代，颜值更出彩”，似乎是暗示会在散热系统方面加入类似RGB的灯效设计。

IT之家 2024-12-26

掌握手机查看WiFi密码的方法，让生活更加便利与轻松

在现代社会，手机已经成为我们生活中不可或缺的一部分。首先，很多人可能会问，为什么要查看WiFi密码呢？

新报观察 2024-12-27

2024多点数智最值得铭记的10个亮点

DmallOS诞生之初，就是为了满足实体零售线上线下一体化全渠道经营的需求，及至今日，全渠道成为潮流，以山姆、麦德龙为代表的一批零售企业，线上占比屡创新高，证明了全渠道模式可行、必要且能够成功。这成为了学习零售数智化的必修课，国科大、北理工、北外等中国知名高校，纷纷与多点数智进行交流。

金融界 2024-12-26

推荐体验

AIGC重要产品

AI对话：类ChatGPT产品体验

好用的AI绘画工具

火热的AIGC产品

AIGC近期要闻

大公司发布的大模型产品都有哪些？

政府对AIGC的扶持政策

AIGC对就业的影响：我们会失业吗？

AIGC产业影响

AIGC对内容创作的影响

AIGC对绘画设计领域的影响

AIGC对各行各业的影响

Copyright © 2025 aigcdaily.cn  北京智识时代科技有限公司  版权所有  京ICP备2023006237号-1