导读
在人工智能领域,大规模语言模型最近非常热门。
3月16日,在“文心一言”发布会上,李彦宏表示,对“文心一言”的内测结果并不十分满意,但市场有需求所以推出来了。
让李彦宏和百度感到如此压力的,就是前段时间一时间风头无两的GPT-4。
它一度被认为是迄今为止建立的最好的多模态大型语言模型。
3月17日,GPT-4全面接入微软Office,未来势必会颠覆10亿人的办公,人人将享有通用人工智能带来的便利。
我们将步入一个以前无法想象的智能社会。
在这场激烈的竞逐中,百度、谷歌在大规模语言模型构建方面,与GPT-4差距多远,GPT-4的短板又在哪里?
周晨 | 撰文
01
百度“艰难”推出大模型语言模型
3月16日,百度“文心一言”正式发布。
李彦宏介绍,“文心一言”有五大能力,文学创作、商业文案创作、数理逻辑推算、中文理解以及多模态生成。
发布会现场,“文心一言”顺利地完成了给公司起名、写Slogan以及写新闻稿的创作任务;并解释了“洛阳纸贵”的含义,揭示其背后的经济学原理。
另外,李彦宏现场还展示了“文心一言”生成文本、图片、音频和视频的能力,其中更是有极具地方色彩的方言语音。
此前一天,比ChatGPT更强的GPT-4推出,让互联网巨头们倍感压力。
百度率先打响了大型语言模型“本土化”的第一枪。李彦宏介绍,内测中的“文心一言”并不完美,但市场有需求,所以必须要推出来。未来,“文心一言”要何去何从,仍需要经受时间的考验。
当天晚上,不少人拿到了文心一言的内侧帐号,测试的部分结果令人惊艳,部分结果有失“智能”,在自动绘图方面,这是百度的一个亮点。
简而言之,百度在大规模语言模型上与GPT-4较劲,还有较大的距离,但也有自身的亮点。
02
谷歌新推出的大语言模型:一款医疗“黑科技”
与此同时,谷歌也近期公布了其医学大型语言模型MedPaLM的最新版本——MedPaLM 2。
早在去年12月,谷歌研究和就与DeepMind联合发布了MedPaLM的初始模型。
初版的MedPaLM是基于MultiMedQA的开源医疗问答标准进行评估的,在多项选择题上及格率超过了60%,在当时这是首次有系统能够做到如此高难度的推算。
MedPaLM相较于初版而言,性能提高了18%,并且准确性、精确度也有了显著提升。
根据MedPaLM 2团队的数据,他们的模型在美国医师执照考试上获得的分数能超过85%的人。在这样华丽的数据下,称呼MedPaLM 2一句“医学专家”也不为过。
支撑MedPaLM2运行的,是一个有5400亿个参数构成的大型语言模型——PaLM。研究人员正是利用PaLM以及它的指令调整变体Flan-PaLM,才得以创建这个模型。
有趣的是,谷歌在OpenAI的GPT-4之前开放了PaLM API权限。
在第一波发布 Bard 失利之后,谷歌开始了与OpenAI的新一轮较劲。
03
GPT-4:OpenAI风头无二的“新宠”
最近一段时间的OpenAI公司可谓是风头正劲。GPT-4可能是迄今为止建立的最好的多模态大语言模型。
今天,GPT-4又出 大新闻,它将接入到微软的Office软件包中,无论是总结会议内容、书写文稿、图表绘制,势必会改变未来全球10多亿人的办公。
人人享有通用人工智能带来的福利,我们将步入一个更加智能的社会。
GPT-4接入到微软的Office软件包
事实上,作为一个多模态大语言模型,GPT-4可以同时处理文本和图像,运算方面更为智能。
举个例子,当你拍一张食材的图片,GPT-4就能自动生成菜谱。此外,GPT-4还是一部“梗百科”,它能够解释图像,解释视觉幽默,并提供基于视觉输入的推理,这一技能超出了以前的模型的固有范畴。
未来文本和图像的结合,可以让多模态的智能系统更好地理解世界。人工智能初创公司Hugging Face的联合创始人托马斯·沃尔夫表示,“这或许能够解决传统语言模型的弱点,比如空间推理”。
凭借GPT-4,最近,OpenAI公司最近可谓合作不断,目前合作的机构就有Strip、Duolingo、摩根士丹利和冰岛政府等。
GPT-4的早期版本也已与OpenAI的一些合作伙伴共享,微软就表示已经使用了GPT-4的一个版本来构建Bing Chat。
然而,表面上风头正盛的GPT-4也面临着不小的争议,首要的就是数据透明度问题。与之前发布的版本不同,OpenAI公司并没有透露GPT-4是如何构建的,数据、计算能力、训练技术一概未提。
其次,就是大型语言模型的存在根本性缺陷:GPT-4仍不可避免地会生成一些带有偏见的、虚假的和令人憎恨的文本。另外,在一些英语、艺术史等考试中,GPT-4也没有表现出任何进步。
尽管如此,外界对于GPT-4也一直抱有着乐观的态度,十分看好其未来的发展前景。
参考文献
1.Google introduces MedPaLM 2, A GPT-4 Like Model for Healthcare (analyticsindiamag.com)
2.GPT-4 is bigger and better than ChatGPT—but OpenAI won't say why | MIT Technology Review
3.https://theconversation.com/evolution-not-revolution-why-gpt-4-is-notable-but-not-groundbreaking-201858