GPT-4完成正确率仅6%！北大等提出首个「多轮、多模态」PPT任务完成基准PPTC

作者：新智元发布时间：2023-11-07

GPT-4 北大

【新智元导读】为了填补LLM在复杂多模态环境中利用复杂工具完成多轮、多模态指令的评估空白，研究人员引入了PowerPoint任务完成（PPTC）基准测试，以评估LLM创建和编辑PPT文档的能力。最...【查看原文】

相关资讯

GPT-4完成正确率仅6%，北大等提出首个“多轮、多模态”PPT任务完成基准PPTC

多轮，多模态环境

GPT-4 北大

新智元 2023-11-08

GPT-4远不如人类？正确率仅15％，Meta领衔发布通用AI助手基准

GPT-4远不如人类？正确率仅15％，Meta领衔发布通用AI助手基准当前，大型语言模型（LLMs）或许是通用人工智能（AGI）得以实现的“最优解”。然而，尽管大模型在流利性和知识广度方面

GPT-4 大语言模型人工智能 AGI

学术头条 2023-11-24

GPT-4远不如人类？正确率仅15％，Meta、抱抱脸领衔发布通用AI助手基准GAIA

传统评测基准已经失效。

GPT-4

学术头条 2023-11-24

MiniGPT-4升级到MiniGPT-v2了，不用GPT-4照样完成多模态任务

机器之心专栏机器之心编辑部MiniGPT-v2将大语言模型作为视觉语言多任务学习的统一接口。几个月前，来自KAUST（沙特阿卜杜拉国王科技大学）的几位研究者提出了一个名为MiniGPT-4的项目，它能提供类似GPT-4的图像理解与对话能力。MiniGPT-4给出的回答是这张图片在现实世界中并不常见，并给出了原因。

MiniGPT GPT-4 大语言模型

机器之心Pro 2023-10-17

多模态LLM视觉推理能力堪忧，浙大领衔用GPT-4合成数据构建多模态基准

浙江大学等提出多模态视觉推理基准。

GPT-4

新智元 2024-08-08

近期资讯

明年多放两天假？冷静，是少了两天调休

众望所归

环球旅讯 2024-11-12

双十一过完了，你到底把钱花哪了？

双十一消费增长，国产品牌受青睐，AI助力。

36氪的朋友们 2024-11-12

罗永浩吐槽，餐厅使用预制菜到底要不要明示？

商家应主动明示预制菜，保障消费者知情权。

红餐网 2024-11-12

“交个朋友”双11创新高，终究难离罗永浩？

“交个朋友”和罗永浩，谁更需要谁？

趣解商业 2024-11-12

黄金价格大跳水，首饰金应声跟跌，多家品牌门店前排长队，出售热潮一同来袭

金价下跌的主要原因是美元走强、美国国债收益率上升，以及金融市场风险偏好增加。

时代周报 2024-11-12

Robotaxi爆发前夜，国内自动驾驶急着IPO

Robotaxi是自动驾驶的终局吗？

一点财经 2024-11-12

特斯拉股价4天涨40%，马斯克坐稳世界首富宝座

“特朗普行情”是特斯拉短期上涨的推动因素，Robotaxi和人形机器人的落地是其远期业绩支撑点

出行一客 2024-11-12

开源版SearchGPT来了，两张3090就可复现，超越Perplexity付费版

来自港中文MMLab、上海AI Lab、腾讯团队

量子位 2024-11-12

iPhone 16，引起一场手机壳的割据混战

想保护好相机控制按键，真的不容易

爱范儿 2024-11-12

李子柒回归连更两条视频，还是顶流

视频发布半小时，在B站已有16万观看量。

凤凰网科技 2024-11-12

GPT-4完成正确率仅6%！北大等提出首个「多轮、多模态」PPT任务完成基准PPTC

推荐体验

相关资讯

GPT-4完成正确率仅6%，北大等提出首个“多轮、多模态”PPT任务完成基准PPTC

GPT-4远不如人类？正确率仅15％，Meta领衔发布通用AI助手基准

GPT-4远不如人类？正确率仅15％，Meta、抱抱脸领衔发布通用AI助手基准GAIA

MiniGPT-4升级到MiniGPT-v2了，不用GPT-4照样完成多模态任务

多模态LLM视觉推理能力堪忧，浙大领衔用GPT-4合成数据构建多模态基准

近期资讯

明年多放两天假？冷静，是少了两天调休

双十一过完了，你到底把钱花哪了？

罗永浩吐槽，餐厅使用预制菜到底要不要明示？

“交个朋友”双11创新高，终究难离罗永浩？

黄金价格大跳水，首饰金应声跟跌，多家品牌门店前排长队，出售热潮一同来袭

Robotaxi爆发前夜，国内自动驾驶急着IPO

特斯拉股价4天涨40%，马斯克坐稳世界首富宝座

开源版SearchGPT来了，两张3090就可复现，超越Perplexity付费版

iPhone 16，引起一场手机壳的割据混战

李子柒回归连更两条视频，还是顶流

推荐体验

AIGC重要产品

AI对话：类ChatGPT产品体验

好用的AI绘画工具

火热的AIGC产品

AIGC近期要闻

大公司发布的大模型产品都有哪些？

政府对AIGC的扶持政策

AIGC对就业的影响：我们会失业吗？

AIGC产业影响

AIGC对内容创作的影响

AIGC对绘画设计领域的影响

AIGC对各行各业的影响