当前位置：首页|资讯|大语言模型|编程|ChatGPT|文心一言|通义千问

大语言模型综合能力测评报告2024

作者：InfoQ研究中心发布时间：2024-01-17
大语言模型编程ChatGPT文心一言通义千问

InfoQ 研究中心本研究围绕语义理解、文学创作、知识问答、逻辑推理、编程、上下文理解、语境感知、多语言处理及多模态交互等十大核心领域，对包括 ChatGPT-4、文心一言专业版、通义千问 V2.1.1、Bard2.0、讯飞星火 V3.0、Kimi Chat 网页版、百川大模型 V1.0、智谱清言网页版、360 智脑 4.0 和豆包在内的十款热门模型进行了全面评估，测试题目数量超过 3000 道。...【查看原文】

相关资讯

大语言模型综合能力测评报告 2023

InfoQ 研究中心选取语言模型准确性、数据基础、模型和算法的能力、安全和隐私四个大维度和 12 个细分维度，分别对ChatGPT、Claude、Sage、天工3.5、文心一言、通义千问、讯飞星火、Moss、ChatGLM、vicuna-13B进行了超过 3000+ 道题的评测。另外，本次研究特别关注了技术视角中大模型产品的编程能力，同时也专门设置了关于中文语境的特色测试题目， 如方言测试、中文特色推理、对对联等。InfoQ 研究中心希望可以通过本次测评帮助更多技术领域同仁获得对于中外大模型产品能力的逻辑认知，以帮助大家在 AGI 创业方向选择、工作实际应用等方面获得最新认知。

大语言模型天工大模型VicunaChatGPTClaude

InfoQ研究中心 2023-05-29

《大语言模型综合能力测评报告 2023》发布

InfoQ 研究中心选取语言模型准确性、数据基础、模型和算法的能力、安全和隐私四个大维度和 12 个细分维度，分别对ChatGPT、Claude、Sage、天工3.5、文心一言、通义千问、讯飞星火、Moss、ChatGLM、vicuna-13B进行了超过 3000+ 道题的评测。另外，本次研究特别关注了技术视角中大模型产品的编程能力，同时也专门设置了关于中文语境的特色测试题目， 如方言测试、中文特色推理、对对联等。InfoQ 研究中心希望可以通过本次测评帮助更多技术领域同仁获得对于中外大模型产品能力的逻辑认知，以帮助大家在 AGI 创业方向选择、工作实际应用等方面获得最新认知。

大语言模型天工大模型VicunaChatGPTClaude

InfoQ研究中心 2023-06-06

AI大模型专题：大语言模型能力测评报告2024（附下载）

该报告为《AI大模型专题：大语言模型能力测评报告2024》，共计43页，由极客传媒出品。报告指出，多家企业和机构按照相关规定完成备案和变更手续后，对公众全面开放，标志着大模型发展进入新阶段，加速推动大模型产业化应用。

AI大模型大语言模型

烟树晚雁 2024-01-23

《2023 大语言模型综合能力测评报告》出炉：以文心一言为代表的国内产品即将冲出重围

事实上，无论是中文创意写作，还是语义理解、中文知识问答，这些题目都主要反应的是大语言模型产品对文字的基础认知和学习能力，而我们从测评结果中清晰的看到，百度文心一言各方面数据表现优异，各项能力评分都位居Top2…

大语言模型文心一言百度

InfoQ 2023-05-29

InfoQ：大语言模型综合评测报告2023

近日国内与人工智能领域相关的利好政策陆续释放，中央召开的相关会议强调“未来要重视通用人工智能发展，营造创新生态。”《北京市促进通用人工智能创新发展的若干措施（2023-2025 年）（征求意见稿）》围绕五大方向提出 21 项具体措施，包括“开展大模型创新算法及关键技术研究”，“加强大模型训练数据采集及治理工具研发”等，同时面向政务服务、医疗、科学研究、金融、自动驾驶、城市治理等领域拓展应用场景，以抢抓大模型发展机遇，推动通用人工智能领域实现创新引领，中国大模型技术产业迎来了一波前所未有的发展契机，百度、阿

大语言模型人工智能医疗金融

郭太侠 2023-05-31

近期资讯

江西金品铜业取得一种铜板加工用裁切装置专利，方便固定铜板和能够变换裁切面为斜面

金融界2024年12月26日消息，国家知识产权局信息显示，江西金品铜业科技有限公司取得一项名为“一种铜板加工用裁切装置”的专利，授权公告号CN222199118U，申请日期为2024年1月。

金融界 2024-12-26

iPhone 17 Pro系列设计图出炉 镜头模组和灵动岛更小

这种设计方向正在逐步接近乔布斯“理想手机”愿景——一块“充满魔力的玻璃”，具备简洁、轻薄且无多余元素的特点。

中关村在线 2024-12-26

充分利用苹果TV：家庭娱乐中心的多功能指南

苹果TV在近年来逐渐成为家庭娱乐中心的核心之一，许多用户对它的使用方法和功能并不十分了解。其实，苹果TV不仅仅是一个观看视频的设备，它还可以作为你的智能家居控制中心、游戏机甚至是音乐播放器。今天，就让我来跟你聊聊如何充分利用苹果TV，让你的娱乐体验更加丰富多彩。首先，苹果TV的设置过程相对简单。

新报观察 2024-12-26

中核第七研究设计院申请用于电解制氟HF供料系统的油封稳压装置及电解制氟系统专利，确保供料管路中的压力始终保持稳定

金融界2024年12月26日消息，国家知识产权局信息显示，中核第七研究设计院有限公司申请一项名为“用于电解制氟HF供料系统的油封稳压装置及电解制氟系统”的专利，公开号CN119177457A，申请日期为2024年9月。专利摘要显示，本发明属于电解制氟技术领域，尤其涉及一种用于电解制氟HF供料系统的油封稳压装置及电解制氟系统。

金融界 2024-12-26

商标暗示三星首款 XR 头显叫“Samsung（Galaxy）Switch”

IT之家12月26日消息，根据最新公示的商标文件，三星代号为“Moohan”的首款XR头显设备在上市后，可能叫做“SamsungSwitch”或者“GalaxySwitch”。三星已在欧洲知识产权局（EUIPO）和英国知识产权局（UKIPO）注册了“SamsungSwitch”商标，预估目前已在美国和韩国进行类似的商标注册。

IT之家 2024-12-26

意大利能源巨头埃尼启动欧洲最强超级计算机，耗资超1亿欧元

IT之家12月26日消息，意大利能源巨头埃尼（Eni）今日启动其最新的超级计算机系统HPC6，该系统跻身全球最强超算之列。HPC6坐落于米兰附近的费雷拉埃尔博尼奥内，配备了近14000块来自AMD的GPU，总投资超过1亿欧元（IT之家备注：当前约7.59亿元人民币）。该系统以其卓越的能源效率著称，由一座1兆瓦的光伏电站供电。

IT之家 2024-12-26

华为手机呼叫转移功能的取消方法与技巧详解指南

生活更加顺畅。无论是在工作中还是生活中，灵活调整这些设置，能够让你更好地掌控每一个电话，真的是非常有必要的。

新报观察 2024-12-26

下一代 FOPLP 封装材料之争：三星坚守塑料、台积电押注玻璃

IT之家12月26日消息，消息源DigiTimes昨日（12月25日）发布博文，在下一代扇出面板级封装（FOPLP）解决方案所用材料上，三星和台积电出现了分叉，可能对芯片封装技术的未来产生重大影响。IT之家注：下一代FOPLP技术采用矩形基板，替代传统的圆形晶圆生产芯片，从而提高芯片产量并减少浪费。

IT之家 2024-12-26

康明斯恩泽申请基于质子交换膜电解槽的电解水制氢系统专利，降低电解水制氢系统在制氢过程中的安全风险

金融界2024年12月26日消息，国家知识产权局信息显示，康明斯恩泽（广东）氢能源科技有限公司申请一项名为“一种基于质子交换膜电解槽的电解水制氢系统”的专利，公开号CN119177458A，申请日期为2024年10月。专利摘要显示，本发明主要用于电解制氢技术领域。

金融界 2024-12-26

4300元抢到PS5 Pro带光驱主机 网友：超值

这主要是因为PS5Pro默认不配备光驱，玩家需要额外购买才能使用。由于这一特性，导致黄牛囤积大量二手光驱，并将其在海外二手市场高价销售。该网友透露，在Facebook市场上发现了这个机会，卖家自称因被解雇而缺乏收入，并以低价出售。

中关村在线 2024-12-26

推荐体验

AIGC重要产品

AI对话：类ChatGPT产品体验

好用的AI绘画工具

火热的AIGC产品

AIGC近期要闻

大公司发布的大模型产品都有哪些？

政府对AIGC的扶持政策

AIGC对就业的影响：我们会失业吗？

AIGC产业影响

AIGC对内容创作的影响

AIGC对绘画设计领域的影响

AIGC对各行各业的影响

Copyright © 2026 aigcdaily.cn  北京智识时代科技有限公司  版权所有  京ICP备2023006237号-1