当前位置：首页|资讯|大语言模型|编程|ChatGPT|文心一言|通义千问

大语言模型综合能力测评报告2024

作者：InfoQ研究中心发布时间：2024-01-17
大语言模型编程ChatGPT文心一言通义千问

InfoQ 研究中心本研究围绕语义理解、文学创作、知识问答、逻辑推理、编程、上下文理解、语境感知、多语言处理及多模态交互等十大核心领域，对包括 ChatGPT-4、文心一言专业版、通义千问 V2.1.1、Bard2.0、讯飞星火 V3.0、Kimi Chat 网页版、百川大模型 V1.0、智谱清言网页版、360 智脑 4.0 和豆包在内的十款热门模型进行了全面评估，测试题目数量超过 3000 道。...【查看原文】

相关资讯

大语言模型综合能力测评报告 2023

InfoQ 研究中心选取语言模型准确性、数据基础、模型和算法的能力、安全和隐私四个大维度和 12 个细分维度，分别对ChatGPT、Claude、Sage、天工3.5、文心一言、通义千问、讯飞星火、Moss、ChatGLM、vicuna-13B进行了超过 3000+ 道题的评测。另外，本次研究特别关注了技术视角中大模型产品的编程能力，同时也专门设置了关于中文语境的特色测试题目， 如方言测试、中文特色推理、对对联等。InfoQ 研究中心希望可以通过本次测评帮助更多技术领域同仁获得对于中外大模型产品能力的逻辑认知，以帮助大家在 AGI 创业方向选择、工作实际应用等方面获得最新认知。

大语言模型天工大模型VicunaChatGPTClaude

InfoQ研究中心 2023-05-29

《大语言模型综合能力测评报告 2023》发布

InfoQ 研究中心选取语言模型准确性、数据基础、模型和算法的能力、安全和隐私四个大维度和 12 个细分维度，分别对ChatGPT、Claude、Sage、天工3.5、文心一言、通义千问、讯飞星火、Moss、ChatGLM、vicuna-13B进行了超过 3000+ 道题的评测。另外，本次研究特别关注了技术视角中大模型产品的编程能力，同时也专门设置了关于中文语境的特色测试题目， 如方言测试、中文特色推理、对对联等。InfoQ 研究中心希望可以通过本次测评帮助更多技术领域同仁获得对于中外大模型产品能力的逻辑认知，以帮助大家在 AGI 创业方向选择、工作实际应用等方面获得最新认知。

大语言模型天工大模型VicunaChatGPTClaude

InfoQ研究中心 2023-06-06

AI大模型专题：大语言模型能力测评报告2024（附下载）

该报告为《AI大模型专题：大语言模型能力测评报告2024》，共计43页，由极客传媒出品。报告指出，多家企业和机构按照相关规定完成备案和变更手续后，对公众全面开放，标志着大模型发展进入新阶段，加速推动大模型产业化应用。

AI大模型大语言模型

烟树晚雁 2024-01-23

《2023 大语言模型综合能力测评报告》出炉：以文心一言为代表的国内产品即将冲出重围

事实上，无论是中文创意写作，还是语义理解、中文知识问答，这些题目都主要反应的是大语言模型产品对文字的基础认知和学习能力，而我们从测评结果中清晰的看到，百度文心一言各方面数据表现优异，各项能力评分都位居Top2…

大语言模型文心一言百度

InfoQ 2023-05-29

InfoQ：大语言模型综合评测报告2023

近日国内与人工智能领域相关的利好政策陆续释放，中央召开的相关会议强调“未来要重视通用人工智能发展，营造创新生态。”《北京市促进通用人工智能创新发展的若干措施（2023-2025 年）（征求意见稿）》围绕五大方向提出 21 项具体措施，包括“开展大模型创新算法及关键技术研究”，“加强大模型训练数据采集及治理工具研发”等，同时面向政务服务、医疗、科学研究、金融、自动驾驶、城市治理等领域拓展应用场景，以抢抓大模型发展机遇，推动通用人工智能领域实现创新引领，中国大模型技术产业迎来了一波前所未有的发展契机，百度、阿

大语言模型人工智能医疗金融

郭太侠 2023-05-31

近期资讯

提升Scrapy爬虫效率的动态代理IP设置指南

在数据采集的旅程中，爬虫就像是一位勇敢的探险者，穿梭于信息的丛林中，寻找那些珍贵的宝藏。然而，探险的道路并不总是一帆风顺，尤其是当目标网站设置了重重障碍，试图阻止你的访问时。此时，动态代理IP就像是探

LoongProxy 2024-12-30

浅聊数据库

数据库，听起来好像很高深，但其实它就像是我们生活中的大仓库，存放着各种各样的信息。从简单的个人信息到复杂的交易记录，数据库都在为我们提供着便捷的数据存储和检索服务。它不仅能让数据变得井井

竺梓君 2024-12-30

天冷了，来碗monorepo一锅炖吧

小明同学在做项目的时候遇到了一个问题🤔🤔，用pnpm搭建的monorepo下有三个项目，分别是a、b和sdk，项目a和项目b都依赖sdk，按照monorepo的文档说法，sdk应该提升到根目录的nod

小爱同学_ 2024-12-30

java下集合List快速实现重复判断

在java编写代码中经常会遇到某些重复判定或者去重的操作，包括： 数据清洗：从数据库或其他来源获取的数据可能包含重复项，需要去重。 用户输入：前段传入的数据可能存在重复，需要校验去除重来避免处理时出现

荧光石 2024-12-30

Ray Tracing in One Weekend 中译版（上）

Ray Tracing in One Weekend 翻译 Ray Tracing in One Weekend 翻译

寒江雪WWT 2024-12-30

手机浏览器跳转微信客服添加页面

问题 提供的链接是url = 'https://work.weixin.qq.com/ca/caXXXXX' 开始操作是直接window.location.href = url; 该操作在IOS浏览器

一涯 2024-12-30

大模型web服务部署—open-webui

大模型web服务部署—open-webui 这里我们使用的是一个叫做open-webui的开源项目 目前这个项目在Github 上已经得到了比较高的star 数 这个项目提供了多种部署方式，这里我们使

刘不二 2024-12-30

同步与异步、JS任务、渲染互斥

关于一些自己的学习过程的相关记录，内容不太详尽，仅自学记录，关于js的同步、异步、js任务、渲染的互斥

小鹿小陆小九小七 2024-12-30

国产低代码框架zdppy开发笔记001 zdppy_api快速入门

前言 由于部分学生想要新的录播课, 所以我决定重新从零到一的出一套2025年的教学笔记和录播课, 以及直播课程. zdppy这个框架起步于2019年, 至今已有六年的历史, 到如今, 已经是一个非常成

Python私教 2024-12-30

【langchain实战笔记】6、路由链（RouterChain）与图形表示

本系列文章是langchain框架v0.3版本的学习实战笔记。本文我们将详细介绍自定义路由链的构建原理，包括基于大模型决策的路由链、基于向量相关性检索的路由链，以帮助大家理解实现路由决策的底层机制。

小嘴叭叭儿 2024-12-30

推荐体验

AIGC重要产品

AI对话：类ChatGPT产品体验

好用的AI绘画工具

火热的AIGC产品

AIGC近期要闻

大公司发布的大模型产品都有哪些？

政府对AIGC的扶持政策

AIGC对就业的影响：我们会失业吗？

AIGC产业影响

AIGC对内容创作的影响

AIGC对绘画设计领域的影响

AIGC对各行各业的影响

Copyright © 2026 aigcdaily.cn  北京智识时代科技有限公司  版权所有  京ICP备2023006237号-1