什么是真正的AI PC？英伟达用RTX AI大算力和应用给出答案

作者：四顾KJ发布时间：2024-05-06

应英伟达邀请，我4月24日在深圳参加了NVIDIA RTX AI 媒体品鉴会。英伟达在去年7月的品鉴会上就表现出对 AI 的极度重视，而今年的这场品鉴会更是直接以 RTX AI 为主题，展示了大量 AI 相关内容的最新进展，如游戏玩家比较期待的 NVIDIA ACE 和 DLSS 3.5，以及方便实用的 ChatRTX、NVIDIA App 等。

此外，品鉴会还通过几位 AI 大佬基于 RTX 40 系列 AI PC 创作的 AIGC 作品，展示了 RTX AI 大算力在设计、影视、建筑等行业已经较为成熟的应用落地情况。

这场品鉴会让我深刻的意识到，AI 已经真真切切的走进我们的工作和生活，能够切实提高生产力效率，相对应的，AI PC 时代也在呼啸而来。在过去，搭载 RTX 显卡的 PC 对很多打工人来说并非刚需，但是在以后，如果没有一台真正大算力的 AI PC 和不断学习的状态，我们就很可能在 AI 时代面临被淘汰的风险。

NVIDIA RTX AI 重塑游戏

对于包括我在内的广大玩家来说，最关注的当然还是 NVIDIA AI 技术在游戏方面的进展，本次品鉴会上，英伟达也重点展示了游戏相关的最新技术Demo，下面我来详细分享一下：

NVIDIA ACE：

英伟达去年在 COMPUTEX 展会上首次公布了 "NVIDIA Avatar Cloud Engine (ACE) "，宣称这项技术可以通过 AI 助力的自然语言交互，来实现NPC的智能化。作为角色扮演游戏的重度爱好者，我当时就意识到 ACE 背后蕴含的想象力足以重塑整个游戏行业。

但也因为这项技术听起来是如此的科幻，我对英伟达的进度并没有太高的预期。没想到他们在本次品鉴会上，就拿出了非常成熟的Demo。

英伟达在现场使用与 Inworld AI 联合开发的 Covert Protocol 进行演示。这个解密游戏Demo的关卡任务，是玩家需要与酒店大厅NPC交流来获取目标人物的房间号。

游戏场景中有3个NPC，分别具有不同的身份和性格设定，男接待是话痨，而女前台的回答就相对官方和简洁，我们在现场反复尝试了各种问题来套她的话，都没有得到客人的房间号。

我也亲自体验到这个Demo，只需对麦克风说话，NPC就能以很快的速度做出语音回答，并且有对应的口型和面部动作。更难得的是，NPC还有长期记忆，如上图所示的"AS I mentioned before"，女前台知道我已经问过她来自哪里，在重复提问时给出了完全拟人的不同回答——我甚至能感觉到她礼貌中的那丝不耐。

用语音直接交流AI NPC！如此符合直觉且真实的游戏体验，带给我极大的震撼，甚至让我联想到了经典科幻剧《西部世界》。当然，在震撼之余，我更想知道它到底是如何实现的。

据英伟达工程师介绍，其首先是在端侧（本地）用NVIDIA Riva 精确的把语音转换成文字，然后在云端接入大语言模型（ChatGPT 3.5），结合故事背景和NPC的设定，给出一个合适的回答并传回电脑，再使用NVIDIA Audio2Face 把文字回答转换成语音、口型、动作，最终呈现给玩家。

这个链路说起来很长，但其实NPC的反应还是比较快的，因为语音和画面的实时渲染用的是RTX 40 系 PC的端侧 AI 算力。

需要说明的是，现场Demo只能用英语交互，不过工程师也提到，NVIDIA Riva支持包括中文在内的27种不同语言，并且英伟达已经在和腾讯、网易、米哈游等国内大厂合作开发 ACE 游戏。

我个人非常期待米哈游能尽快做出这种游戏。作为一个已经满级两年的《原神》玩家，我已经游走在退游的边缘，日常任务早就放弃，因为那些NPC的对话我都过了无数遍，实在不想为了那几十颗原石反复忍受枯燥的过场。

可以想象，如果NPC的对话能像英伟达演示的Demo一样，具有拟人的智能和丰富的随机性，那么游戏的开放性将得到进一步拓展，玩家的沉浸感更好，新鲜感也能持续非常久。

与之对应的是，游戏的生命周期也会随之延长，所以我相信游戏厂商有足够的动力来开发ACE游戏，在不久的将来，每一个RTX AI PC用户都能体验到。

NVIDIA DLSS 3.5：

不同于即将变革游戏行业的NIDIA ACE，DLSS技术从2018年起，已经为我们更好的游戏体验加持多年。而最新的DLSS 3.5将通过 GeForce RTX GPU 的AI 大算力进一步提高游戏的帧率、图像质量以及光线追踪效果。

据悉，目前比较火的网游《永劫无间》和今年8月份即将上线的《黑神话：悟空》等游戏都将支持DLSS 3.5技术。

值得一提的是，DLSS 3.5不仅能为新游戏提供更好的体验，也能让经典的好游戏焕发第二春。上图是英伟达通过 RTX Remix技术重制的《传送门 RTX 版》，右侧为开启DLSS 3.5后的效果，真是宛若新生。

NVIDIA APP：

品鉴会负责讲解和演示的英伟达同学基本都有一线工程师背景，他们对于NVIDIA用户反馈较多的问题也有持续关注，本次NVIDIA App更新，最重要的一点即是支持了“无需登录账户即可更新驱动”这个功能。

NVIDIA App Beta 版还集成了 NVIDIA 控制面板、GeForce Experience 驱动更新及NVIDIA 的GeForce Experience 驱动更新及NVIDIA 的“发现”应用商店。

最新的NVIDIA Aapp Beta 将提供全新的AI滤镜（RTX HDR、RTX 动态亮丽），且滤镜功能已整合到驱动程序层以实现无缝兼容，目前支持超过 1200 款游戏。

NVIDIA AI 加速创作

游戏之外， GeForce RTX GPU 的强大性能也一直在为专业工作提供有力支持，传统的如剪辑、渲染、直播等，而在 AI 时代，基于 RTX 大算力的 AI PC 能为更多工作提供帮助，提高创作效率，甚至直接改变创作模式。

Chat RTX：

虽然目前以ChatGPT为代表的云端AI大语言模型能较好的回答问题，辅助创作，但从隐私保护的角度出发，我们不会把私人信息丢给它们来处理。然而，我们又确实有大量的个人日程、文档、账单等信息需要AI助手来帮忙检索和整理。

针对这一痛点，英伟达推出ChatRTX，可以完全依靠端侧的NVIDIA GPU 大算力来进行LLM 推理，智能检索本地的隐私文档，并给出与问题相关的答案。

ChatRTX 还支持语音输入、图像查找，并且所有8GB及以上显存的RTX 40/30 系显卡都可以安装运行该软件。

Stable Diffusion工作流和更多落地应用：

品鉴会还演示了更多AI应用，和众多AI艺术家基于RTX 40系列AI PC创作的AIGC作品。这些AI模型在实际应用中都需要RTX AI PC的 NVIDIA RTX 加速来形成真正有效率的生产力：

人像生成控制模型InstantID：使用搭载RTX 4090D的RTX AI PC，用电脑的普通摄像头实时自拍，然后10秒钟左右就可以生成影棚级别的高质量肖像照。

基于开源GPT-SoVITS项目的声音克隆：只需要5秒钟的录音样本，在RTX AI的加速下现场推理，五分钟就能克隆出还原度极高的个人声音。

实时建筑渲染模型：即致AI自研的建筑行业大模型令我印象深刻，只要随便勾勒几笔线条，就能AI实时绘画渲染出精美的建筑效果图，以往需要大量人力重复工作的场景,如今通过专业AI模型，在RTX GPU的加速下只需要几秒。

什么是真正的 AI PC ？

云侧AI+端侧AI的混合式AI才是AI的未来，这点基本已经是行业的共识。从英伟达RTX AI 媒体品鉴会的这些Demo不难看出，不管是AI游戏还是AI应用，都需要强大的端侧RTX AI算力加速，才能达到优秀的体验和效率。

如今新发布的PC几乎都宣称自己是AI PC，但不争的事实是，核显PC的AI算力与顶级的GeForce RTX 4090 PC有云泥之别的差距。

目前衡量 AI 性能一般以 teraops 为单位。teraops 即“万亿次运算/秒”(TOPS)，TOPS 可作为单一指标让用户了解 PC 的 AI 性能，GeForce RTX 40系列GPU可提供的算力，涵盖从200 AI TOPS到1300 AI TOPS，包括笔记本电脑和台式电脑的多样选择。作为对比，目前没有独立 GPU 的轻量级 AI PC 的算力仅为 10 至 45 TOPS。

知名AI 模型平台吐司/Tensor.Art 的测试结果也说明了这一点。

品鉴会上，NVIDIA与吐司/Tensor.Art联合发布《个人用户玩转Stable Diffusion 的GPU配置推荐》，聚焦SD 1.5 和SDXL 1.0，使用第三方测试软件UL Procyon AI基准测试完整测试RTX 40 系列多款型号的显卡、笔记本电脑GPU在Stable Diffusion的推理性能表现，其中在UL Benchmark SD1.5 TRT vs. OpenVINO的对比测试中RTX 4090笔记本电脑GPU相对于iGPU(Arc Graphics)有超过27倍的性能提升。