当前位置:首页|资讯|百度|文心一言

百度副总裁侯震宇:AI技术突破口在于前沿理论研究,探寻突破Transformer方法

作者:搜狐科技发布时间:2023-05-09

原标题:百度副总裁侯震宇:AI技术突破口在于前沿理论研究,探寻突破Transformer方法

百度集团副总裁侯震宇

出品|搜狐科技

作者|郑松毅

5月9日,百度文心一言技术交流会在北京百度科技园举办,百度集团副总裁侯震宇、百度智能云AI与大数据平台总经理忻舟在会上介绍,百度将坚持贯彻“云智一体,深入产业”战略,遵循“芯片层”、“框架层”、“模型层”、“应用层”的“四层逻辑”,文心千帆大模型将为企业用户同时提供公有云及私有化部署。

近日,百度董事长李彦宏曾在一次内部讲话中表示,“算力可以买来,创新能力买不来”。 侯震宇在与搜狐科技对话时表示,下一阶段人工智能大模型的创新还要从前沿理论研究方面寻找突破口,例如探寻突破Transformer框架的方式,以及深度思考为什么大模型在千亿参数以上的情况下会出现智能涌现能力等问题。

据介绍,文心千帆大模型平台提供的公有云服务包括推理、微调及托管,私有化部署包括软件授权、软硬一体、及租赁服务。侯震宇在接受搜狐科技等媒体访谈时表示,对于一些相对来说使用大模型频率不高,且对模型要求不高的企业,租赁是非常划算的一个选择。

据忻舟介绍,从高质量数据标注、强化学习、大模型评估及压缩、自动化Prompt工程,到快速应用编排,文心千帆大模型平台在经历全流程洗礼过后,已支持丰富的应用场景,包括但不限于智能问答、内容创作、产品营销、代码编写、及人员培训,如今大模型的应用已深入金融、工业、政府服务等领域。

在百度工作人员的现场演示下,Suger文心问数Demo模型向观众展示了企业如何通过上传自己的数据集,快速实现大模型微调功能,从而使大模型在垂直行业中具备更好的服务能力。演示中,文心问数模型根据用户在系统中上传的数据集,通过数据分析实现对“各省份销售额”等问题的回答,并将分析结果可视化呈现。

据忻舟介绍,在文心大模型的助力下,升级后的百度搜索问题分类准确率上升4.5%,百度地图信息搜索满意率上升6%,小度意图理解能力上升3.1%。

据搜狐科技不完全统计,目前国内大模型主要玩家总和已40有余,学院派、大厂派、创业派纷纷跻身于大模型研发的竞争行列之中。从早期的单一模型到现在通用性更强的人工智能大模型,人工智能技术正在不断演化和发展。百度集团执行副总裁沈抖曾表示,“AI技术,正成为贯穿上下行业场景和算力基础的桥梁。”

据国际权威资讯机构IDC发布的《2022中国大模型发展白皮书》显示,百度文心大模型在市场格局中处于第一梯队,产品能力和应用能力领先。智能云方面,IDC数据显示,在AI公有云市场,百度智能云已连续4年获得第一名。

侯震宇对搜狐科技表示,在人工智能高速发展的时代,数据信息安全、伦理道德等问题也是非常需要被关注的,研发人员应从数据收集阶段到数据应用阶段严格按照数据标准把控数据质量。同时,侯震宇表示企业用于模型微调的数据并不会进入到文心模型核心层,研发人员也会对数据进行再处理,避免信息泄漏问题发生。

在侯震宇看来,在当前各类大模型不断涌出的阶段,判断大模型好坏的标准不仅要看大模型解决问题的能力,还要看服务平台针对特定垂直领域模型调教的能力。百度AI大底座可以为大模型提供高效、稳定的训练和有效的收敛。千卡加速比达到90%,资源利用率70%,开发效率提升100%。这是AI大底座为大模型的开发和应用带来的价值。”他表示,B端用户并不像大多数C端用户抱着看热闹的心态看待大模型,他们往往会从更挑剔且专业的视角审视大模型。侯震宇强调,对于企业而言,基于好的大模型基础进行垂直领域针对性微调是最智慧的选择,因为大模型微调的成本相较于从头训练研发大模型的成本根本不是一个数量级。


Copyright © 2024 aigcdaily.cn  北京智识时代科技有限公司  版权所有  京ICP备2023006237号-1