当前位置:首页|资讯|生成式AI

视频、图像生产大爆发 联发科端侧AI技术闪耀MWC

作者:科技视讯发布时间:2024-03-15

原标题:视频、图像生产大爆发 联发科端侧AI技术闪耀MWC

当地时间2月26日,2024年世界移动通信大会(MWC)在巴塞罗那拉开帷幕。作为全球移动通信领域最大的技术展会之一,MWC被视为全球通信行业风向标。此次MWC重点关注超越5G、智联万物、AI人性化、数智制造、颠覆规则、数字基因六大领域,吸引了全球各大厂商齐聚一堂。著名芯片厂商MediaTek(联发科)以“Connecting the AI-verse”为主题,展示了全新的AI处理器,地面网络卫星宽带,6G环境计算、5G RedCap解决方案、创新端侧实时生成式AI视频创作应用等合作成果,让观众领略到生成式AI科技的飞跃发展。

全新的第七代 AI 处理器,赋能侧端生成式AI应用

在本次MWC展会的MediaTek展台现场,AI展区是人气爆棚的一大亮点,展示了一系列包括视频生成、图像生成、边录边编辑等侧端生成式AI技术的创新应用。这款端侧实时 AI 视频生成应用采用了Diffusion 视频生成技术,能够根据输入的文字或图片快速生成视频,其生成速度和质量都让人大开眼界。

这种“魔法”的核心就是全新的天玑9300旗舰5G生成式 AI移动芯片,集成MediaTek第七代AI处理器APU 790,支持终端运行最高330亿参数的AI大语言模型,通过先进的硬件压缩技术 NeuroPilot Compression,大幅减少 AI 大模型对终端内存的占用,让生成式 AI 在端侧流畅运行。天玑9300 生成式AI的总体处理速度达到了上一代AI处理器的8倍,再加上基于LoRA的端侧生成式AI 技能扩充技术,,具备更加安全和个性化的AI能力。

生成式AI基于深度学习算法和大数据模型,可以用来进行视频、文案、音乐等内容的迅速生成,它的迅猛发展对于生产力的提升和行业变革有着重大意义。如果把模型部署在云端,当数十亿海量用户都在日常使用时肯定是力不从心的,在效率和稳定性上都会有问题。如果仅凭智能终端就可以运行基于AI大模型的用例,才能够让生成式AI 满足日益增长的算力需求!

联发科在推进端侧生成式AI进化和普及方面一直走在行业前列,真正从硬件层面入手持续迭代芯片架构来提升AI性能,并与AI生态伙伴共同推动从芯片算力到终端应用的创新。正如联发科资深副总经理、无线通信事业部总经理徐敬全博士在展会前夕表示的,作为AI的推动者,MediaTek天玑9300和天玑8300都集成了高性能的生成式AI 处理器,我们希望通过 MediaTek AI 技术带来引领业界的生成式 AI 体验,更进一步激励 AI 应用开发者、设备制造商与合作伙伴开发出更多应用。

在现场还展示了能够从文本生成图像的SDXL Turbo方案,采用了Stable Diffusion引擎,能够根据用户输入的文字即时生成图像,速度非常快,生成的图像也更加精准。

另外现场还展示了端侧生成式AI技能的扩展应用,通过NeuroPilot AI平台整合LoRA Fusion,能够实时处理正在录制的人物影像,生成不同动画风格的视频,节省了后期处理的时间。在现场有不少观众进行了体验,收获了自己的二次元形象,纷纷进行了点赞。

目前天玑9300和天玑8300能够支持Google Gemini Nano大语言模型的优化,为用户提供端侧生成式 AI 体验。MediaTek还与谷歌计划携手推出可在天玑9300和天玑8300上运行的 APK,赋能开发者和OEM部署Gemini Nono应用,加速端侧 AI 应用落地。除了先进的端侧实时 AI 视频生成应用外,MediaTek在本次MWC展会上还展示了在智能汽车、5G物联网和智能穿戴、网络传输、卫星通信等方面的最新成果,下面让我们来逐一领略。

支持多操作系统 智能驾驶更高效安全

在本次展会上,MediaTek展示了一款极具未来科幻风格的智能驾舱系统,它配备了MediaTek Dimensity Auto联合车用系统公司OpenSynergy开发的车载HyperVisor虚拟操作系统,为广大车主提供了更加安全、高性能、高时效性和稳定强健的多域融合系统方案。

该方案能够支持多个操作系统的同时运行,多路无线联网接入及管理、多视窗视频同步播放,驾驶员和乘客能够同时享有丰富的3D视觉效果和生成式 AI 体验。

我们可以看到,这款智能驾舱系统配备了多块智能显示屏,分别为用户提供丰富的操控和娱乐互动功能,体现了Dimensity Auto智能座舱和车用资讯娱乐平台强劲的处理能力。

轻松升级5G-NR 开启物联网和穿戴设备新纪元

随着5G互联网的飞速发展,虚拟现实在各行各业中的应用日益广泛,这些可穿戴设备对于网络连接的效率,以及续航等方面有着越来越高的要求。在本次MWC现场,MediaTek展示了最新推出的T300 RedCap RFSoC平台,能够帮助物联网产品轻松升级至5G-NR,相比上代产品显著降低了关键网络流量的传输延迟,特别适合于VR/AR、工业物联网等对低延迟(URLLC)要求特别高的应用领域。活动现场还提供了头戴式VR设备体验,通过它来模拟真实场景中的操作体验,操作非常灵敏,丝滑流畅,让人有着身临其境般的感受。

MediaTek旗下经典的5G 芯片T830平台也出现在了展会现场,并且运用于5G CPE新型无线终端接入设备。它能够适用于5G固定无线接入(FWA)以及移动热点CPE设备。设备能够支持三天线传输(3Tx),大幅提升上行链路网络传输的速度,并适用于各种5G-NR频段组合,使用范围相当广泛。此外MediaTek通过低延迟、低损耗和可拓展吞吐量(L4S)技术,能够大幅降低网络延迟。这款设备能够为企业、工厂和社区的无线网络接入带来更加灵活、稳定的最后一公里网络连接方案,节省有线网络的费用。

拓宽“通天路”,卫星通信技术更畅快

MediaTek行业领先的卫星宽带通信技术也在现场进行了精彩亮相,不仅展示了新一代运用于卫星通信的5G芯片,而且还展出了以低轨卫星模拟的 Pre-6G 卫星宽带串流体验。继去年成功发布MT6825 5G NTN芯片后,在今年的MWC上MediaTek又展示了新一代5G-Advanced NR-NTN卫星测试芯片,它能够通过Ku频段搭配先进的低轨道(LEO)卫星技术,为汽车以及其他多种终端设备提供超过100Mbps的数据吞吐量。

MediaTek在全球范围内率先推出了模拟低轨卫星的 Pre-6G 卫星宽带串流体验,该系统使用了罗德与施瓦茨 SMW200A Victor 信号发生器及 FSW 信号分析仪,以及NR NTN测试基站(gNB),体现了MediaTek强劲的兼容性。

升级家庭物联网 打造无缝高速网络环境

最后MediaTek也没有忘记广大家庭用户,专门为家庭物联网提供了成套的5G网络连接方案。随着家中接入网络的智能设备数量不断增长,常常需要第三方根服务器和服务,MediaTek在本次展会现场展示了未来通过环境计算与网络连接的设备融合,能够减少端口转发或安全隧道等繁琐设定,广大家庭用户带来更加安全高效、更稳定、可定制服务以及响应速度更快的流畅体验。这样一来,广大家庭用户能够用上操作更加简单快捷,高效的家用物联网,并且还能够聚合周边的单个或多个空闲的智能设备,进一步提升算力。

进入AI时代,MediaTek并不满足于在智能手机市场的成功,通过天玑9300和8300平台,在AI领域取得了迅猛发展。通过抢占端侧生成式AI技术跑道,为广大企业用户的生产力提升带来了充满遐想的期待。此外,MediaTek在5G网络连接、卫星通信、智能汽车和家庭物联网等方面也呈现了累累硕果。相信在未来,MediaTek和合作伙伴们还将努力创新,基于AI和移动通信技术,和广大用户一起步入一个更加富有创造力的AI元宇宙。


Copyright © 2024 aigcdaily.cn  北京智识时代科技有限公司  版权所有  京ICP备2023006237号-1