北京时间6月28日,Unity发布了两款基于AI的新产品,以便创作者们增强他们的实时3D内容。这两款产品分别是Sentis和Muse,目前处于封测状态,并且计划在今年稍后全球发布。另外,Unity还宣布在Asset Store发布专门的AI市场,为创作者们提供了其他几款工具。
在生成式AI全球爆红的情况下,可以直接用于游戏研发的高效率AI工具无疑是所有开发者都翘首以盼的产品。然而,对于游戏开发者而言,我们此前所看到的AI工具、尤其是比较著名的ChatGPT、Midjourney、Stable Diffusion等大型语言模型(LLM),往往只聚焦于剧情、对话,以及2D图片生成等领域,而且不同的模型对于指令的偏好、细节参数的设定,都需要开发者自行探索,海外市场甚至出现了售卖AI指令的生意。
不过,更为重要的是,在游戏研发成本当中占比最重的3D美术资产的创作,往往要与多种工具混合使用,而且还需要开发者进行大量的试错,这也是生成式AI迄今为止仍未能在全行业广泛普及的原因之一。
Unity公布的两款AI新产品帮助开发者跳过了AI技术探索和试错的过程,直接将能够用于游戏研发的工具交到了开发者手中,无疑是Unity新的令人期待的业务增长点。作为全球开发者数量最多的引擎公司,Unity新公布的两款产品相当于为游戏甚至更多领域的开发者提供了AI工具入口,可以直接面向庞大的企业级市场,这或许也是Unity昨日股价大涨15.38%、今晚股价继续上涨4%的关键所在。
Unity股价连续2日大涨
或许,同行们更想要知道的是,Unity Sentis和Unity Muse究竟是什么?Unity在资产商店开辟的AI市场究竟有哪些“神器”?
Unity Sentis和Unity Muse:可提升十倍工作效率
在谈到推出AI新产品的背景时,Unity Create部门总裁Marc Whitten认为,创意过程中的每个方面都会受到AI技术的影响。
“我们相信,每一个物体、每一个系统、每一款游戏中的每一个像素都会在创作时被AI触及,帮助创作者在每一步都提高生产率,最终提高创造力。在运行时,AI将使世界和角色充满活力,带来今天无法实现的体验。”
他表示,Unity推出的Sentis和Muse将让重复的任务自动化,简化工作流程,并以惊人的速度和准确性生成高质量的输出,而不会取代人类的创造力和专业知识。AI可以帮助开发者在完全控制愿景的同时提高生产率,还能带来游戏中无法构建的功能和能力,通过在运行时嵌入AI模型,使内容以新的方式对玩家和用户做出响应,从而对玩家体验带来革命性的变化。
Unity公司CEO John Riccitiello则在一份声明中提到,AI可以将内容创作的效率提升十倍。
“我们认为AI将改变游戏,就像我们之前从3D、手游和互联网变革所看到的影响那样,我们相信Unity的新AI平台对于创作者和美术师是强大的,因为我们预计Unity Muse可以让他们的工作效率提升十倍,Unity Sentis将帮助他们以前所未有的方式,通过互动AI完成自己的创作。”
按照Unity官方的介绍,Unity Sentis是一个跨平台运行时推理解决方案(a cross-platform runtime inference solution),可以将AI模型嵌入任何Unity项目中,而创作者不必担心导致高延迟。Unity Muse则是一套帮助用户轻松、高效制作实时3D内容的工具,其中的一个工具是目前正在封测的Unity Muse Chat,它可以让用户通过在聊天框输入指令来查找Unity文档中支持问题的信息和答案。
Unity Sentis
Unity在其官方博客中表示,Sentis是一个名副其实的游戏规则改变者。在技术层面上,它将神经网络与Unity Runtime连接起来,可以让你在build里嵌入神经网络,以实现之前难以想象的实时体验。而且,“Sentis解锁的可能性几乎是无限的”。
Marc Whitten接受外媒采访时说,“我们的AI愿景主要有两个好处:第一个是关于可达性,你能让人们更容易地获得工具和技术来打造游戏吗?第二个是关于生产效率,专业人士能否更快、更好地制作出优秀的游戏,并做他们试图做的所有事情来满足玩家所需的大量内容?”
他补充说,“对我们而言,为开发者们提供各种工具,以测试和决定什么对他们有用,这一点很重要。从加速资产开发的生成型AI工具,到增强工作流的机器学习AI解决方案,再到增强游戏世界中行为的AI工具,从寻路和敌人逻辑到响应式NPC。”
目前,该产品正在封测中,它可以让开发者为自己的游戏或者应用在Unity Runtime里嵌入一个AI模型,直接在终端用户平台增强游戏玩法或者其他功能。
Sentis可以让AI模型运行在任何能够运行Unity的设备上,“这是首个且唯一的将AI模型嵌入实时3D引擎的跨平台解决方案,因此你可以一次构建并嵌入你的模型,使其可以在多个平台上运行,从移动到PC,从网页到任天堂Switch以及索尼PlayStation等流行游戏主机。由于你在用户的设备上运行程序,因此在云托管模型不会带来复杂性、延迟或成本。”
Unity Muse
Unity Muse是一个可以在创作过程中提供AI驱动辅助的扩展平台,开发者可以用它更快速地研发角色、游戏和应用。Unity表示,该平台的最终目的,是让开发者能够在Unity编辑器中输入文字指令或者涂鸦这样的自然输入创造任何东西。
目前该平台正在测试的一个产品是Muse Chat,你可以在Unity文档、训练资源和支持内容当中利用AI搜索,从Unity获得结构良好、准确和最新的信息。Muse Chat可以帮你查找相关的,包括工作代码示例,以加快开发并解决问题。
简单来说,Muse Chat更像是Unity版本的ChatGPT,你可以向它提问,比如“我该怎么研发一款三消游戏?”随后,Muse Chat就会给出用Unity打造三消游戏的多个步骤。你还可以提一些类似于“我该怎么创作一个sprite然后进行旋转?”这样的问题,AI工具会自动搜索Unity文档和支持信息,给出相当详细的答案。
此外,Unity还明确表示,该公司将在未来几个月尝试Muse平台的更多功能,包括创造纹理和sprite的能力,甚至可以输入一句话就帮助开发者创作完整的角色动画。
比如在宣传片当中,用户在Unity编辑器界面输入“做一个后空翻”,Muse就会制作一个完整的角色后空翻动画。
你还可以用Muse快速创作Sprite资产,比如更换房顶的颜色,则可以直接选中房顶区域,在对话框里输入想要的颜色,AI就会自动改变房顶颜色。
在编辑器里输入想要生成的纹理资产,也可以通过输入文字来实现,比如海滩、沙子、碎片等等。
打造第三方AI市场,目前已经有10个工具
随着引擎技术的进步,Unity等游戏研发引擎早已经不再局限于游戏行业,而是拓展到了娱乐、教育、工程等多个领域,因此,引擎公司打造高效率的AI工具可以让所有的开发者受益。
除了Sentis和Muse之外,Unity还在资产商店(Asset Store)开放了第三方AI工具认证解决方案,引入“满足Unity最高质量和兼容性标准”的第三方工具,并且表示,这些新的解决方案“可以带来AI支持的智能NPC,AI制作的特效、纹理、2D sprite和3D模型,生成式语音,用AI在游戏内测试等功能。”
据Gamelook确认,Unity资产商店目前已经上架10款第三方AI工具:
Atlas
Atlas是利用生成式3D AI技术快速创作资产和虚拟世界的一系列工具,旨在打造多元化的3D物体。目前推出的第一个工具是语言图片神经网络,可以基于文字指令检索许可授权模型,你只需要简单描述你需要的资产,它就可以帮你导入到场景中。
通过AI技术,开发者还可以用Atlas快速创作游戏内地形。
Convai
Convai是一款智能NPC工具,它可以用生成式AI技术让NPC以文字或语音方式与玩家自然聊天,还可以执行玩家要求的特定动作。
开发者还可以增加背景故事、知识库、语音,并且对角色资源增加整体的智能设计。
除了Unity之外,该技术也曾经与英伟达合作,此前英伟达公布的智能NPC对话demo,实际上就使用了Convai技术。
Inworld AI
Inworld是一款帮助无代码创作者打造生成式AI角色的工具,你可以使用自然语言描述要创建的角色,为其增加记忆、知识和行为动机。
Inworld可以通过生成式AI技术为创建的角色赋予自然的互动,而且能够直接运用于游戏研发流程。
Layer AI
创作者只需要上传少量作品,就可以通过Layer AI生成大量特定风格的游戏资产,尤其是对于美术师而言,你只需要几个作品,就能让AI帮忙制作同一个风格的游戏资源。
Leonardo AI
Leonardo是一款可以简化2D资源创作并快速生成3D模型的工具套件,可以直接集成到Unity编辑器,帮助开发者省掉繁琐的手动纹理处理过程,节约更多的时间用于创意,提升3D模型的创作效率。
LMNT
LMNT是一套语音解决方案,可以通过AI技术为角色、NPC配音,并且可以根据不同角色的背景、性格,生成个性化的语音,增加玩家体验的多元化。
Modl.ai
Modl.ai是一个AI技术支持的自动化测试工具,它可以通过AI机器人探索你制作的关卡、侦测并报告游戏内出现的错误、事件,还能检测到游戏崩溃等一系列问题。开发者可以在AI测试的时候做其他事情,避免了繁琐的人工测试。
Polyhive
Polyhive是一款3D纹理工具,你可以通过指令创作高品质游戏紫苑,还能制作任意艺术风格的纹理。
这可以帮助3D美术师以及关卡策划快速探索想法的可行性,对已有的资源做出改变,生成接近无限的游戏资源。
Replica Studios
Replica Studios是一款可以用于游戏、电影等角色制作的AI工具,创作者可以快速对3D资源和纹理进行处理,根据自己的偏好设计角色形象、语音风格,可以更快速打造更大、更具沉浸感的故事。
Zibra AI
Zibra AI是一款无代码门槛的AI特效制作工具,能够实时模拟游戏内物理效果、进行图形优化和3D内容的生成,哪怕是低端PC甚至移动设备也能兼容该工具生成的资源。
结语
由于目前仍处于封测状态,Unity并未公布这些AI新产品的商业变现模式。不过,考虑到此前已经尝试商业化的3D模型生成工具Kaedim的收费标准为(工作室)每月1500美元,生成型AI工具对游戏开发商来说无疑是非常划算的。
在游戏研发、尤其是3A游戏开发过程中,美术资源往往占据研发费用的一半,其中大量的资金和时间都用在了打造高精度高品质的3D模型、关卡和角色等资源,利用生成式AI制作资源显然事半功倍。
而且,Unity推出的Sentis以及Muse,甚至是现在以及未来即将推出的第三方AI工具,大部分都可以直接在Unity编辑器里使用。
Unity Create总裁Marc Whitten表示,Unity在机器学习和生成式AI领域的探索已经有很多年,Unity Muse中的动画工具可以让动画师在动画中插入帧,这是Unity多年来一直在开发的一个工具。AI模型推理工具Unity Sentis基于Unity的Project Barracuda,该项目于2021年首次向开发者发布。
不过,正是自然语言输入、填充绘画和低秩自适应(LoRA)的进步,使Unity想到了一个连接其各种机器学习工具的基础平台。
对于AI技术,很多人比较担心的一个问题是版权纠纷。尽管Whitten并没有明确指出Unity数据集的具体来源,但他表示Unity非常重视这方面的问题,他们的目标是,如果开发者使用Unity Muse创作资产,那么得到的结果可以包含在完整的游戏授权中,开发者或工作室对AI生成的视觉内容拥有完整的所有权。
对于一些创作者担心他们的内容在未经同意的情况下被用于AI模型训练,Whitten也表示Unity将通过添加更多数据来改进其模型,但“绝不是拿别人的艺术作品然后用来训练,我们将确保创作者拥有完全的控制权,他们了解正在发生的事情,这是透明的,我们为人们提供正确的选择”。
当然,人们对于新技术的担忧并不会在短期内完全消失,但从技术层面来看,Unity Sentis以及Muse可以说是该公司在生成式AI时代的法宝,毕竟,越来越多的开发者都希望将这个新技术运用到游戏研发流程当中,而可靠的、成本效益高的集成这些模型的方式可能会吸引一些开发者加入Unity的生态系统,这肯定会对其整体商业模式带来帮助。