智东西(公众号:zhidxcom)
作者 | 徐珊
编辑 | 云鹏
智东西8月16日报道,今天魔珐科技在上海举办了超写实3D虚拟人新品发布会,并推出三款3D虚拟人终端产品:魔珐有言3D虚拟人视频AIGC平台、魔珐有光3D虚拟人直播AIGC平台以及魔珐有灵3D虚拟人服务AIGC平台。
此次发布会,由魔珐科技虚拟人镜JING主持。据她介绍,自己是虚拟人3.0时代的代表,虚拟人已经结束从0到1的时代,开始进入从“1到N”的时代。
在会后,智东西和少数几家媒体与魔珐科技创始⼈兼CEO柴⾦祥博⼠等多位专家深入对话,看到了魔珐科技如何围绕AIGC时代下的3D虚拟人,展开深入布局,柴⾦祥认为如今企业已经可以从3D虚拟人时代获利,AIGC的终点就是3D虚拟人。
一、研究虚拟数字人超二十年,柴⾦祥提出3D虚拟人应有三大能力
魔珐科技创始⼈兼CEO柴⾦祥博⼠提到自己和3D虚拟人的接触已经超过二十年,自己的第一篇博士论文就是和虚拟人有关。
“我见证了3D虚拟人从最初全球只有三四个团队研究,到现在越来越多的人参与到3D虚拟人。”柴⾦祥博⼠提到从学术界来看,最初接触的3D虚拟人都是人脸、面部形象等局部的研究,很少有团队兼顾整个3D虚拟人的全面研究。
目前行业内有关3D虚拟人的定义较为多样,不同赛道的玩家对3D虚拟人的看法也各有侧重。而对普通用户而言,由于虚拟数字人常常在电影、游戏等画面出现,这也是大部分普通用户对虚拟人的第一印象。
这时期,虚拟人几乎都是通过动作捕捉,人们“手工制作”的。随着AIGC的时代来临,生成式内容形式多样,从文字生成文字、文字生成图片,再到文字生成视频,但他提到在文字生成视频方面,很少有企业能够提供文字生成3D视频的能力。
柴⾦祥提到目前在文字生成二维虚拟人方面,国内、国外均有不少玩家涌入,在文字生成二维虚拟人过程中最重要的技术是唇部识别能力,但仅“复刻”人的嘴唇,很难表达出人的表现力。
柴⾦祥以人的形象能力、虚拟人的制作方式为轴,画出一个四象限图。他提到虚拟人要么有内容,但是表现能力有限,要么表现能力较强,内容比较单薄,且没办法大规模复制。
在他看来,真正3D虚拟人应该有高质量、高效率、低门槛和规模化四大能力。
“三维虚拟人其实是人在虚拟人的‘镜像’,但是比人要更强大。”柴⾦祥说:“三维虚拟人其实是真人的最佳实践案例,因为它可以24×7小时,全天候在线,可以应用到各种终端,在各类触点可以发挥出其能力”。
二、如何打造3D虚拟人?三大能力成为关键
过去,“手工制作”的3D虚拟人的方式缺乏AIGC能力、制作成本较高、制作周期较长,也比较难规模化。
而在AIGC时代,一些基于大模型的智能助手,没有3D虚拟人的精美外观,其AIGC的呈现效果比较有限。柴⾦祥认为,AIGC时代,3D虚拟人的内容生产能力将会是其最大的难点。
回顾魔珐科技研发虚拟人历程时,柴⾦祥认为3D虚拟人一定要拥有较高的美术能力。
其次,他认为3D虚拟人的表达能力要强。从5年前魔珐科技首次在ChinaJoy用AI表演动画展示,到AI表演动画常态化动画,再到现在魔珐科技实时通过文本直接生成3D动画或者语音,魔珐科技不断加强3D虚拟人的表达能力。
最后,他提到大模型带来的AIGC的能力也将是虚拟人的关键。基于垂类大模型,魔珐科技可以根据用户给出的关键词,自动生成用于直播场景的直播话术。
如今,魔珐科技基于AIGC声音、AIGC文本生成的能力,打造了3D虚拟人OS平台星云平台。他提到不同虚拟人的工业产线,将会为虚拟人的制造提供不同环节的虚拟资产,将虚拟人能力带入产业深处。
三、拿出三大消费级终端产品,魔珐科技推动数字人规模化
魔珐科技联合创始人谭宏冰详细介绍了魔珐有言3D虚拟人视频AIGC平台、魔珐有光3D虚拟人直播AIGC平台、魔珐有灵3D虚拟人服务AIGC平台三大消费级终端产品。
在3D虚拟人视频AIGC平台,魔珐有言会通过魔珐科技的AIGC三维动画和语音技术,只需要3步,选择虚拟人、选择场景以及一键生成,就可以一键生成各类主题虚拟人视频。
该平台生成的视频可以应用于产品发布、公关播报、课程培训等各种场景,解决企业日常虚拟人视频制作难点。“在三维场景内,3D虚拟人的视频也将拥有空间变化。”谭宏冰重点介绍了魔珐有言的优势所在。
目前,魔珐有光3D虚拟人直播AIGC平台拥有Lite和Pro两大版本,将会支持真人摄像头驱动、真人麦克风驱动、AI驱动三种不同的驱动模式,满足不同应用场景的直播需求。
“主播很难被标准化,也很难管控,是属于比较难规模化的。”他提到在直播场景中,直播间虚拟后屏的展示也比较丰富,可以更立体地展示产品,虚拟人本身的语音效果,产品表达更加多样。
谭宏冰认为在服务的黄金三角里,一对一、专业性和规模化将成为影响服务的关键因素。因此,魔珐有灵3D虚拟人服务AIGC平台,将会成为行业专家的最佳实践。
魔珐有灵将会为企业提供基于低门槛、垂直业务场景的专属AI服务虚拟人,可应用于PC端、移动端、大屏端或AR/VR。
“未来,无论是视频,还是直播和互动将会有一个虚拟人伴随在你的左右。”谭宏冰说道,“我们已经为3D互联网做好准备。”
四、规模化复制“金牌员工”能力,3D虚拟人提高产品转换率
每一个企业都在寻找更好的连接方式,提高企业培训、提高产品的转换率。魔珐科技市场负责⼈李韵提到在电商场景中,魔珐有言可以复制金牌员工的讲解能力,为企业高效的传达相关信息,而且,魔珐有言还能够高质量地生成相关视频、参与直播。
在PC端,企业官网可以成为金牌产品体验官;在落地页上,可以成为金牌产品推荐官。
在车企场景中,虚拟人可以在各个触点,“复制”金牌员工的能力。同时,在全域多端,虚拟人将提高企业准转换效率。
目前,3D虚拟人将在线上发布会、直播、3D云展厅、门店试驾、用车指南、车机体验、APP和视屏化运营等方面影响汽车行业关键触点体验。
五、对话魔珐科技CEO柴⾦祥:AIGC的终点是3D虚拟人
柴⾦祥认为3D虚拟人开始真正为企业获利。在交互方面,3D虚拟人的交互方式将会以语音和触屏为主,其交互模式也将会随着多模态的技术提供多样的交互能力。
“AIGC的终点,就是三维虚拟人。”柴⾦祥谈到刚开始研究3D虚拟人其实是孤独的,他提到明年魔珐科技奖开放更多的接口,接入更多开发者,共同推动3D虚拟人发展。
在过去一年半的时间里,魔珐科技的产品化开始加速,产品技术能力也随之加速前进,3D虚拟人迭代速度非常快。
他认为,目前深度学习的技术提升促进3D虚拟人来到技术拐点。另一方面,场景的应用也在促进3D虚拟人应用。
在选择场景时,柴⾦祥希望3D虚拟人的应用市场规模要大,能够直接获利,并且人的差异化将提供较高的企业价值,直播场景能够满足这三点要求。据柴⾦祥介绍,在抖音上,魔珐科技通过三维虚拟人,在2小时店铺的流量达到千万左右,在线人数达到千万人。
过去,魔珐科技已经积累不少项目经验,从而获得新的产品服务。“我们现在找到了行业痛点,帮助企业提升转化率的能力,通过AI能力更好帮助企业服务。”如今他提到魔珐科技的产品已经涉及金融、教育,近年来还会有出海计划。“我们在产品的商业化路线上,不分B端和C端,核心技术会都是一样,但是商业模式会有所不同。”柴⾦祥说。
结语:3D虚拟人或成3D互联网时代的重要基础设施
此次会上,魔珐科技第一次较为全面、直观地展示其在3D虚拟人方向的布局和技术实力,也直接给出其对3D互联网时代的预想。
虚拟数字人自元宇宙热度升温后,一直是处在热议话题的风口。但虚拟人将会如何盈利、如何为企业带来价值,也是过去两三年产业内玩家一直寻找的方向。
魔珐科技首次推出消费级虚拟数字人产品,或许将加速虚拟人规模化落地,距离人人都能拥有自己的虚拟人时代更近一步。