当前位置:首页|资讯|生成式AI

高通2024骁龙峰会两日综述:至尊版领衔骁龙产品线!

作者:微型计算机杂志发布时间:2024-11-05

高通推出骁龙8至尊版,号称集成全球最快的移动端CPU

在骁龙峰会期间,骁龙8至尊版重磅推出!这一旗舰移动平台采用了一系列领先技术,包括第二代定制的高通Oryon CPU、高通Adreno GPU和增强的高通Hexagon NPU。

骁龙8至尊版能够让用户使用终端的体验变得更加优秀,在搭载骁龙平台的智能手机上实现终端侧多模态生成式AI应用。强大AI-ISP的影像功能、下一代游戏体验和超快速网页浏览等也同时到来。

高通技术公司高级副总裁兼手机业务总经理Chris Patrick表示:“我们非常高兴将高通Oryon的强劲性能首次引入骁龙移动平台。今年年初,定制的高通Oryon CPU首次亮相PC,今天,第二代高通Oryon CPU首次登陆骁龙旗舰移动平台,这是一次重要的飞跃,我们期待消费者能够对高通CPU技术所赋能的体验感到兴奋。凭借领先的CPU、GPU和NPU功能,骁龙8至尊版实现了性能和能效的大幅提升。此外,它还将变革移动体验,通过直接在终端侧提供个性化的多模态生成式AI,支持语音、情境和图像理解,全面增强从生产力到创意任务等各方面的体验,并且将用户隐私保护放在首位。”

全新骁龙座舱至尊版平台和Snapdragon Ride至尊版平台

在骁龙峰会第二日,高通技术公司推出其最强大的至尊版汽车平台。这是骁龙数字底盘解决方案组合中的最新产品,采用高通Oryon CPU,专为汽车打造。汽车制造商可以选择通过骁龙座舱至尊版平台来支持先进的数字化体验,选择Snapdragon Ride至尊版平台来支持智能驾驶功能,还可以凭借独特的灵活架构,选择在同一SoC上无缝运行数字座舱和智能驾驶功能,这也是骁龙数字底盘解决方案所提供的创新能力。

高通技术公司汽车、行业解决方案和云事业群总经理Nakul Duggal表示:“随着汽车行业向中央计算、软件定义汽车和AI驱动的架构演进,高通技术公司凭借骁龙座舱至尊版平台和Snapdragon Ride至尊版平台等产品,始终走在创新前沿。”

统一的架构、无与伦比的性能

•加速的AI性能:面向多模态AI设计的专用神经网络处理器(NPU),性能旨在提升至前代座舱平台的12倍,支持实时外部环境和车内数据处理。这一提升增强了实时决策、自适应响应和主动协助功能,确保个性化的车内体验。Snapdragon Ride至尊版平台采用的NPU配备了Transformer加速器和矢量引擎,并支持混合精度,旨在实现低时延、高精度且高效的端到端Transformer,从而保持最佳能效和性能。

•通过软件虚拟化和多操作系统支持实现灵活的集中式处理:该异构平台能够无缝运行多个应用程序而不会损失性能,为多个摄像头/传感器、丰富的用户体验以及由先进的AI赋能且支持虚拟化的音频,提供卓越的并发和多任务处理能力。汽车制造商能够针对所有层级打造可配置的软件定义汽车(SDV),在简化车辆架构的同时提供灵活性和可扩展性。这一架构旨在加快部署进度,确保客户能够相比采用公司前代架构更快地享受到最新的创新和特性。至尊版汽车平台还采用了高通技术公司的全面软件栈,通过Type-1安全管理程序支持硬件虚拟化,该管理程序支持多个拥有独特操作系统的客户虚拟机,可以不受干扰并且同时独立运行。

•行业领先的能效:全新平台旨在提供卓越性能,同时最大程度地降低能耗,有助于确保汽车更智能、更长久地行驶。该解决方案将智能电源管理硬件和软件相结合,可平衡内核的利用率和应用程序的runtime。

•直觉体验:全新平台旨在支持情境感知应用,专为实现可预测需求的脱手自动驾驶而设计,支持实时的驾驶员监测和增强的物体检测,带来更平稳、安心的驾乘体验。其改进的高通Adreno GPU通过先进渲染功能旨在将性能提升至3倍,满足游戏、多媒体和动态驾驶信息的需求。

•注重安全:全新平台专为满足汽车安全标准ASIL-D系统而设计,凭借专用安全岛控制器和强大的硬件架构实现隔离和无干扰运行,有助于实现特定ADAS功能的服务质量可靠,从而让驾乘人员感到舒适和安心。

•软件定义:至尊版平台专为行业向软件定义汽车的转型而打造,采用端到端方案,通过强调软件重用性的统一软件框架实现可升级性;旨在帮助汽车制造商通过基于云的工作台加速功能开发,简化软件开发流程以实现持续改进,并加快新特性和新服务的上市时间。

•前沿的摄像头子系统以提升安全性和舒适性:至尊版汽车平台配备强大且高效的摄像头系统,其先进的图像信号处理器(ISP)可在极端驾驶条件下提供清晰、灵敏的视觉效果。全新平台旨在支持超过40个多模态传感器,包括多达20个高分辨率摄像头,实现360度全方位覆盖和车内监测。骁龙平台兼容最新和即将推出的汽车传感器和格式,利用AI增强成像工具优化图像质量,增强车内体验和先进的特性。

•智能驾驶和AI软件栈:Snapdragon Ride至尊版平台体现了软件虚拟化的理念,提供端到端的智能驾驶系统,具备视觉感知、传感器融合、路径规划、定位和整车控制等先进特性。这些特性均可同时独立运行,且相互不干扰。同样,骁龙座舱至尊版平台支持丰富的多媒体功能,支持配备全集成边缘规划器的终端侧AI,经优化的游戏和先进的3D图形带来丰富的用户体验。骁龙座舱至尊版平台还在设计中内置了安全性和长期支持(API兼容性)功能,能够在独立的虚拟机上运行仪表盘、信息娱乐控制面板和多个乘客实例,并且能够在需要时分享内容和数据。

骁龙座舱至尊版平台和Snapdragon Ride至尊版平台将于2025年出样。高通正在与包括理想汽车和梅赛德斯-奔驰公司在内的领先汽车制造商开展技术合作,其未来的量产车型将采用骁龙至尊版平台。

理想汽车总裁马东辉表示:“对于全新骁龙座舱至尊版平台和Snapdragon Ride至尊版平台及其将为下一代汽车带来的变革潜力,我们倍感兴奋。”

梅赛德斯-奔驰公司首席软件官Magnus Östberg表示:“高通技术公司处于汽车创新领域的前沿,我们很高兴与高通继续保持充满信任的合作,在未来车型中搭载骁龙座舱至尊版平台。这一强大且高效的中央计算技术将支持我们为客户提供无与伦比的车内体验——一种量身定制、无缝连接且极为直观的体验。”

网易与高通合作,基于骁龙8至尊版移动平台打造创新的《永劫无间》手游体验

网易和高通技术公司宣布合作优化《永劫无间》手游,双方将基于骁龙®8至尊版移动平台的多个核心进行调优。此外,网易还采用一系列Snapdragon Elite Gaming特性,并在终端侧带来全新升级的AI队友功能,打造创新的《永劫无间》手游体验。

不仅如此,高通技术公司和网易还针对线程调度进行联合调优,并应用骁龙遮挡剔除(Snapdragon Occlusion Culling)等Snapdragon Elite Gaming特性,从而打造更加稳定的游戏体验。与前代平台相比,在《永劫无间》手游极致画质下,骁龙8至尊版的平均帧数提升22帧,帧率稳定性提升43%。

GPU对于游戏画质至关重要。《永劫无间》手游利用骁龙8至尊版的高通Adreno GPU的出色性能和领先能效,以及可变分辨率渲染(VRS)等一系列先进的Snapdragon Elite Gaming特性,针对渲染管线和Vulkan API对Adreno GPU进行联合深度优化,实现更高画质和出色能效。

基于骁龙8至尊版强大的高通Hexagon NPU,《永劫无间》手游首次将具有18亿参数的大语言模型引入终端侧,利用包括软件和工具在内的高通AI Stack的全栈优化,打造全新升级的端到端AI队友功能。该功能可以让AI队友不仅听懂玩家的语音对战指令并执行,还能够通过语音指导新手游玩;不仅如此,玩家还能够与AI队友进行自然的语音交流,获得优质队友的情绪价值。

与云端推理相比,在终端侧进行AI推理具有诸多优势。首先,在终端侧推理可以显著降低网络传输带来的时延,使得首词时延控制在300毫秒以内,让玩家与AI队友的语音沟通更流畅、响应速度更快。其次,用户数据无需上传云端,这将大大提升用户的隐私的安全性。此外,将AI推理从云端迁移到终端侧,可以充分利用骁龙8至尊版强大的终端侧AI推理能力,从而降低云端运行成本并降低能耗。

高通公司高级副总裁兼手机业务总经理Chris Patrick表示:“我们很高兴能与网易合作,为热门手游大作《永劫无间》手游带来骁龙专属优化。”

网易高级副总裁、网易雷火游戏事业群负责人胡志鹏表示:“骁龙定制处理器的强大性能结合我们持续的技术优化,能够确保为所有玩家提供出色游戏体验。随着AI与游戏的融合正在不断变革玩家的游戏体验,我们很高兴与高通技术公司持续深入合作,将性能强劲、AI算力出众的骁龙8至尊版和网易前沿的AI大模型推理技术相结合,率先将终端侧AI大模型引入手游,为全球玩家解锁游戏体验新天地。”

高通与腾讯混元合作,基于骁龙8至尊版共同推动腾讯混元大模型终端侧部署

骁龙峰会期间,高通技术公司宣布与腾讯混元合作,基于骁龙8至尊版移动平台,共同推动了腾讯混元大模型7B和3B版本的终端侧部署,展示了此合作实现出色的运行表现。这将有助于腾讯混元大模型为广泛的业务场景提供技术支持,通过利用终端侧AI加速产品创新,有效降低运营成本,并进一步扩展生成式AI在终端侧的应用和普及。

骁龙8至尊版的强大AI算力,结合高通AI软件栈以及行业领先的工具套件,包括高通AI模型增效工具包(AIMET)等,为模型提供了全栈优化能力。通过使用基于硬件的INT4量化技术,可以大幅提升腾讯混元大模型在终端侧的运行效率,端侧推理实现首个token生成时延达到150ms,解码速率达到超过30 tokens/秒。

腾讯混元大模型已为腾讯内部超过700个业务场景和C端应用提供底层技术支持,包括微信输入法、腾讯手机管家、QQ、腾讯视频、QQ浏览器、企业微信、腾讯会议等,通过实现面向骁龙8至尊版的终端侧部署,能够利用终端侧生成式AI的丰富优势,更好地满足广泛的终端侧业务需求。

例如,腾讯手机管家短信智能识别功能率先利用腾讯混元的终端侧模型能力,通过海量数据结合深度神经网络与预训练,让模型具备极强的语义理解能力,通过结合上下文语境信息更准确地理解短信意图,使短信召回率大幅提高将近200%,识别准确率提升20%。由于部分短信涉及用户个人敏感信息,端侧AI还可以在保证出色性能表现的同时,有效保护用户的个人信息隐私安全。

高通宣布与谷歌达成多年战略合作,提供生成式AI数字座舱解决方案

高通技术公司宣布与谷歌达成旨在推动汽车行业数字化转型的多年技术合作。基于长期合作关系,双方将利用骁龙数字底盘™、Android™汽车OS和谷歌云三者互为补充的各类技术,打造借助生成式AI(GenAI)开发座舱解决方案的全新标准化参考平台。谷歌AI将支持交付该框架,助力打造生成式AI增强的车内体验,例如直观语音助手、沉浸式地图体验和实时更新以预测驾驶员需求等。这些体验由骁龙®异构边缘AI SoC和高通®AI Hub赋能,简化了视觉、音频和语音应用的AI模型在座舱内的部署。

技术合作关键要素包括:

生成式AI增强的数字座舱开发框架:

•可升级的车规级框架,旨在提供可实时增强的前沿数字座舱体验。

•预集成Android汽车操作系统(AAOS)软件和服务,利用谷歌生成式AI实现可定制且快速响应的语音用户界面和驾驶员状态实时更新,通过骁龙SoC进行边缘侧优化。

统一SDV车对云框架

•基于双方技术基础打造的支持车对云基础设施的统一SDV开发框架。

•该框架支持面向骁龙平台优化谷歌云托管汽车软件开发,提高开发者效率,同时缩短AAOS平台和服务的产品上市时间。

•在谷歌云上运行骁龙网联服务平台,面向车载和非车载连接支持由API驱动的网联服务模型和可升级服务基础设施。

高通与智谱基于骁龙8至尊版移动平台合作适配优化GLM-4V端侧视觉大模型,加速多模态生成式AI体验的终端侧部署

智谱与高通技术公司宣布合作将GLM-4V端侧视觉大模型,面向骁龙8至尊版进行深度适配和推理优化,支持丰富的多模态交互方式,进一步推动多模态生成式AI在终端侧的部署和推广,赋能更加情境化、个性化的终端侧智能体验。

充分利用骁龙8至尊版的强大终端侧AI性能和高通AI软件栈为模型带来的性能优化之后,GLM-4V端侧视觉大模型能够实现令人惊叹的处理能力,以超过70 tokens/秒的速度在终端侧高速运行。

改善情境化和定制化一直是用户体验的长期需求。多模态生成式AI模型能够利用终端侧丰富的传感器数据,例如文本、图像、音频、视频等,打造更加直观、无缝的智能交互体验。通过与骁龙8至尊版进行深度适配和推理优化,终端侧多模态应用ChatGLM能够支持三种终端侧交互方式:使用相机进行实时语音对话、上传照片进行对话、上传视频进行对话。丰富的多模态输入输出方式赋能智能助手ChatGLM实现了跨家庭、出行、工作和教育等多个场景的应用,例如通过手机摄像头获取穿搭建议,利用视觉信息实现智能导航,通过车内摄像头识别遗留物品,拍摄画作进行风格解析等。

GLM-4V-Mini、GLM-4V-Nano端侧视觉大模型和GLM-4-9B模型即将在高通AI Hub上线,搭载骁龙8至尊版的商用手机均可支持。


Copyright © 2024 aigcdaily.cn  北京智识时代科技有限公司  版权所有  京ICP备2023006237号-1