当前位置：首页|资讯|大语言模型|编程|ChatGPT|文心一言|通义千问

大语言模型综合能力测评报告2024

作者：InfoQ研究中心发布时间：2024-01-17
大语言模型编程ChatGPT文心一言通义千问

InfoQ 研究中心本研究围绕语义理解、文学创作、知识问答、逻辑推理、编程、上下文理解、语境感知、多语言处理及多模态交互等十大核心领域，对包括 ChatGPT-4、文心一言专业版、通义千问 V2.1.1、Bard2.0、讯飞星火 V3.0、Kimi Chat 网页版、百川大模型 V1.0、智谱清言网页版、360 智脑 4.0 和豆包在内的十款热门模型进行了全面评估，测试题目数量超过 3000 道。...【查看原文】

相关资讯

大语言模型综合能力测评报告 2023

InfoQ 研究中心选取语言模型准确性、数据基础、模型和算法的能力、安全和隐私四个大维度和 12 个细分维度，分别对ChatGPT、Claude、Sage、天工3.5、文心一言、通义千问、讯飞星火、Moss、ChatGLM、vicuna-13B进行了超过 3000+ 道题的评测。另外，本次研究特别关注了技术视角中大模型产品的编程能力，同时也专门设置了关于中文语境的特色测试题目， 如方言测试、中文特色推理、对对联等。InfoQ 研究中心希望可以通过本次测评帮助更多技术领域同仁获得对于中外大模型产品能力的逻辑认知，以帮助大家在 AGI 创业方向选择、工作实际应用等方面获得最新认知。

大语言模型天工大模型VicunaChatGPTClaude

InfoQ研究中心 2023-05-29

《大语言模型综合能力测评报告 2023》发布

InfoQ 研究中心选取语言模型准确性、数据基础、模型和算法的能力、安全和隐私四个大维度和 12 个细分维度，分别对ChatGPT、Claude、Sage、天工3.5、文心一言、通义千问、讯飞星火、Moss、ChatGLM、vicuna-13B进行了超过 3000+ 道题的评测。另外，本次研究特别关注了技术视角中大模型产品的编程能力，同时也专门设置了关于中文语境的特色测试题目， 如方言测试、中文特色推理、对对联等。InfoQ 研究中心希望可以通过本次测评帮助更多技术领域同仁获得对于中外大模型产品能力的逻辑认知，以帮助大家在 AGI 创业方向选择、工作实际应用等方面获得最新认知。

大语言模型天工大模型VicunaChatGPTClaude

InfoQ研究中心 2023-06-06

AI大模型专题：大语言模型能力测评报告2024（附下载）

该报告为《AI大模型专题：大语言模型能力测评报告2024》，共计43页，由极客传媒出品。报告指出，多家企业和机构按照相关规定完成备案和变更手续后，对公众全面开放，标志着大模型发展进入新阶段，加速推动大模型产业化应用。

AI大模型大语言模型

烟树晚雁 2024-01-23

《2023 大语言模型综合能力测评报告》出炉：以文心一言为代表的国内产品即将冲出重围

事实上，无论是中文创意写作，还是语义理解、中文知识问答，这些题目都主要反应的是大语言模型产品对文字的基础认知和学习能力，而我们从测评结果中清晰的看到，百度文心一言各方面数据表现优异，各项能力评分都位居Top2…

大语言模型文心一言百度

InfoQ 2023-05-29

InfoQ：大语言模型综合评测报告2023

近日国内与人工智能领域相关的利好政策陆续释放，中央召开的相关会议强调“未来要重视通用人工智能发展，营造创新生态。”《北京市促进通用人工智能创新发展的若干措施（2023-2025 年）（征求意见稿）》围绕五大方向提出 21 项具体措施，包括“开展大模型创新算法及关键技术研究”，“加强大模型训练数据采集及治理工具研发”等，同时面向政务服务、医疗、科学研究、金融、自动驾驶、城市治理等领域拓展应用场景，以抢抓大模型发展机遇，推动通用人工智能领域实现创新引领，中国大模型技术产业迎来了一波前所未有的发展契机，百度、阿

大语言模型人工智能医疗金融

郭太侠 2023-05-31

近期资讯

南昌云媒科技申请智能设备控制方法及系统专利，实现多设备联动控制策略

金融界2024年12月26日消息，国家知识产权局信息显示，南昌云媒科技有限公司申请一项名为“一种智能设备控制方法及系统”的专利，公开号CN119179298A，申请日期为2024年11月。专利摘要显示，本发明公开了一种智能设备控制方法及系统，涉及智能控制技术领域。

金融界 2024-12-26

惠州市可道人工智能科技取得可逆出风真空吸附装置专利，有效解决自动化生产中物料脱落问题

金融界2024年12月26日消息，国家知识产权局信息显示，惠州市可道人工智能科技有限公司取得一项名为“一种可逆出风真空吸附装置”的专利，授权公告号CN222200594U，申请日期为2024年4月。

金融界 2024-12-26

山推工程机械取得一种变矩器泵轮夹具专利，能够减小机械手末端的长度

金融界2024年12月26日消息，国家知识产权局信息显示，山推工程机械股份有限公司取得一项名为“一种变矩器泵轮夹具”的专利，授权公告号CN222200590U，申请日期为2024年1月。

金融界 2024-12-26

南天数金申请一种工业控制指令数字化处理与工业互联网平台协同方法专利，提高了指令传输和处理的准确性，减少了干扰

金融界2024年12月26日消息，国家知识产权局信息显示，南天数金（北京）信息产业发展有限公司申请一项名为“一种工业控制指令数字化处理与工业互联网平台协同方法”的专利，公开号CN119179306A，申请日期为2024年7月。

金融界 2024-12-26

江苏安东智能装备制造申请基于视觉识别和 5G 通信的自动化参数调整专利，提升制造精度

金融界2024年12月26日消息，国家知识产权局信息显示，江苏安东智能装备制造有限公司申请一项名为“一种基于视觉识别和5G通信的自动化参数调整系统及方法”的专利，公开号CN119179299A，申请日期为2024年8月。

金融界 2024-12-26

深圳市龙方自动化科技取得机械手夹爪快换装置专利，确保生产过程连续稳定

金融界2024年12月26日消息，国家知识产权局信息显示，深圳市龙方自动化科技有限公司取得一项名为“机械手夹爪快换装置”的专利，授权公告号CN222200591U，申请日期为2024年4月。

金融界 2024-12-26

苏州川吉自动化取得带真空检测的机械手夹爪专利，避免真空泄露产品掉落风险

金融界2024年12月26日消息，国家知识产权局信息显示，苏州川吉自动化科技有限公司取得一项名为“一种带真空检测的机械手夹爪”的专利，授权公告号CN222200592U，申请日期为2023年12月。

金融界 2024-12-26

四川超迪电器取得夹持式机械手专利，可防止夹持物品掉落

金融界2024年12月26日消息，国家知识产权局信息显示，四川超迪电器实业有限公司取得一项名为“一种夹持式机械手”的专利，授权公告号CN222200596U，申请日期为2024年2月。

金融界 2024-12-26

华闽搏创申请一种基于物联网的工业大数据处理方法及系统专利，提升工业大数据处理的整体效能

金融界2024年12月26日消息，国家知识产权局信息显示，华闽搏创（成都）信息科技有限公司申请一项名为“一种基于物联网的工业大数据处理方法及系统”的专利，公开号CN119179297A，申请日期为2024年11月。

金融界 2024-12-26

西门子股份公司申请控制卷绕机专利，可对卷绕机运行给出异常标志

金融界2024年12月26日消息，国家知识产权局信息显示，西门子股份公司申请一项名为“控制卷绕机的计算机实现的方法、计算机程序和卷绕机”的专利，公开号CN119179301A，申请日期为2024年6月。

金融界 2024-12-26

推荐体验

AIGC重要产品

AI对话：类ChatGPT产品体验

好用的AI绘画工具

火热的AIGC产品

AIGC近期要闻

大公司发布的大模型产品都有哪些？

政府对AIGC的扶持政策

AIGC对就业的影响：我们会失业吗？

AIGC产业影响

AIGC对内容创作的影响

AIGC对绘画设计领域的影响

AIGC对各行各业的影响

Copyright © 2025 aigcdaily.cn  北京智识时代科技有限公司  版权所有  京ICP备2023006237号-1