12月1日,爱奇艺副总裁孙斌在2023T-EDGE全球创新大会分享了爱奇艺在AIGC方向上的实践
以大语言模型为基础所形成的文生图,文生文还有文生视频能力,进一步推动AI的赋能进入“副驾驶模式”。目前在内容策划环节,爱奇艺利用生成式AI将项目评估信息的整理耗时由几小时压缩至几分钟。
12月1日,爱奇艺副总裁孙斌来到钛媒体2023T-EDGE全球创新大会,并在创新趋势论坛上带来了爱奇艺的AIGC实践分享。
孙斌表示,目前爱奇艺已经在内容策划、开发、制作、宣发等核心环节开始应用生成式AI。例如在开发环节,生成式AI辅助人工阅读,将3-4天的阅读时间缩短至1小时左右,对剧本的场景和人物拆解的准确率也超过了90%。
在孙斌看来,生成式AI的语言表达能力、创意发散能力和美术设计能力已经开始赋能内容制作的整个生命周期。大模型突破技术瓶颈后,爱奇艺将生成式AI迅速应用落地。上接内容生产、下接观众体验,爱奇艺的AIGC实践还将继续深入。
爱奇艺2023年三季报分析师会议上披露的数据显示,除了影视内容制作之外,爱奇艺也使用AIGC创意工具帮助生产效果广告素材,一些行业的投放金额相比使用前提升200%,使用AI素材的广告主的投资回报率相比非AI素材提高60%。
“未来第三个阶段是‘智能体’的模式,我们相信也是以后AI的能力真正绽放光芒的重要阶段。”孙斌表示。
以下是孙斌在钛媒体2023T-EDGE的演讲实录,经钛媒体APP编辑:
去年到现在是AIGC全面爆发的第一年,可以说是大落地的元年,一年前的时候,那时候相信很多人还不太知道OpenAI这个公司,以及后面一系列公司。去年到今年,这个方向国内外雨后春笋出现了很多大的公司。
爱奇艺在国内娱乐视频赛道保持了近十几年领先的趋势。大模型需要大量的应用场景,爱奇艺不管大模型内容上还是数据上,经过十几年积累到现在爆发阶段,怎么说呢,我们有得天独厚的优势。今天我来跟大家分享一下,爱奇艺怎么做这方面的应用的,希望做一些探讨。
爱奇艺往大的方向来说,我们应用分两个部分,第一个左侧在智能制作方向,内容制作大家都理解,就是内容怎么从idea到拍成片子宣发出去,这是内容制作的全过程,跟互联网跟AIGC没关系,传统影视行业几十年都是这么做的。
类似于爱奇艺这样的公司,真正的护城河是什么?就是内容的原创能力,爱奇艺很早体会到这一点,一方面很多年前发力原创内容制作,第二方面爱奇艺作为互联网公司科技公司,我们希望把新的技术全部用来加持,尤其是原创内容的制作。
我们愿景是,希望做一家以科技创新驱动的伟大的娱乐公司。简单说是爱奇艺希望一方面让科技为创作充分发挥作用,第二,作为艺术场景反过来助推科技发展,智能制作就是这个概念。
大模型到来之前,我们已经利用了相当规模的AI技术,在整体内容策划阶段,比如怎么有一个idea,怎么把剧本做得更好,内容制作阶段拍摄全生命周期,以及内容出来之后怎么更好地宣发出去,怎么更好做发行,这方面爱奇艺做很多尝试,也在我们整个公司内得到了很长时间的应用,其实是很成熟的应用模式。
第二方面,在座各位作为爱奇艺的用户,你们的体验怎么通过AIGC技术,通过生成式AI技术加持获得提升。我们在播放、搜索甚至各位看到的内容推荐,以及我们站内有些广告体验上都会有不同的尝试。
现在大家提到,当前很火的大模型是大语言模型,以语言文字为基础的文生图,文生文还有文生视频怎么做,这是我们的方向。
说一下行业里面传统的模式,主体整体的工作还是以人为主的,中间小的环节可以用AI技术做替换和加持,大模型到来之前,很早之前爱奇艺做到了这种模式了,当前比较多应用的模式是什么?副驾驶的模式,微软推出各种各样copilot,你开完一个会录下来生成纪要,人和AI之间相互补充的作用,这是目前比较多的应用方式。
未来第三个阶段是智能体的模式,整体的协作里面,AI部分,这个我们相信也是以后AI真正更加绽放光芒的非常重要的阶段。
我已经提到了,我们在内容制作往往分为三个阶段,内容的策划,内容的制作和内容的宣发。
我为什么写了四个阶段,第二个阶段开发和制作想从技术角度细分一下,拍一个电影电视剧做一个动画片,制作阶段最早从剧本来的,这个时候如何开发剧本,如何把这块东西开发出来,这个后续制作到了拍摄阶段。
我们去横店或者北京某个地方开始拍摄制作拍摄全过程,包括拍摄素材怎么上云,这是整个影视制作,这两个阶段应用AI技术和大模型技术完全不同,这个地方稍微分开一下,这跟三个阶段不矛盾的。
举几个简单具体的例子,我们剧本小说的评估,五六年前或者六七年前做各种各样剧本评估,希望通过人工智能的方式,大文字里面,大的篇幅里面抽取出一些对人做判断做决策,做评估非常有价值的信息,这样系统爱奇艺已经在内部迭代很多版。
迭代到今天,在大模型真正到来之前有一个小的瓶颈,很多技术发展不足以处理非常复杂的关系,比如人物关系的分析,中文特别博大精深,有时候一些话是反话,怎么把这个关系抽象得更准确。
到大模型阶段之后我们迎来新的机会,剧本评估是非常恰当的对文本分析的应用点,最近我们取得很多成果,今天时间有限,回头有机会大家可以一起交流。
说到图方面爱奇艺大家知道打开之后很多内容,内容相关海报,相关插画怎么做,有了AIGC技术之后,通过AI生成的这些,不仅仅解决产能的问题,而且解决了真正质量问题,想象空间完全打开,人的工作模式从之前需要有强大的团队,甚至需要外包做这些事情,变成现在机器生成,人做一些创意和审核,这是完全生产力上的革命。
宣发视频,传统的模式需要设计师,每个人还不太一样,怎么在互联网touch用户,我们经过这一年左右的试水,效果非常高于预期的,这是宣发视频制作。我们做用户增长,任何平台做用户增长留存很重要,很多传统方式我们站外投很多广告和素材,大家都有一个体验。你看到内容非常个性化的,针对你来的,就更容易打动你。
你在爱奇艺站内看到这种方式个性化打动你,你站外看到投放各种各样视频素材,同样道理也是更能打动你的。我们整体在站外投放的各种素材,可以来源于生成式AI生成的海量的个性化素材,这完全革命了我们整体用户增长的链路。
还有一点,大家知道爱奇艺也做出海,我们发现很有意思现象,一些市场对外来的内容,由于没有充足的翻译资源,基本上一部剧里所有角色台词都是同一个人说的。我们用AI技术把不同音色灌进去,这样虽然还是一个人说,但是出现在剧里观众听到的是不同的角色声音,会有不同的体验。
我们影视制作经常需要后期补录,后期会对内容进行大量剪裁,这种情况下从成本各个方面考虑,通过AI技术做补录可以大大提效。
同样爱奇艺的衍生品设计,包括同人创作,都可以用AI生成很有创意的东西。
再来说说剧情理解能力。大模型来之前我们做很多大模型剧情理解,到现在这个阶段之后,我们经过多轮深度理解,现在真正能够做的应用场景是很多元的。
很多高质量电影电视剧海报有大的特写,设计和制作成本比较高,通过AI方式可以很快生成,非常不一样。不同人喜欢的演员不一样,如果一部剧展现给你的物料都是你喜欢的演员的个性化物料,你的体验会很不一样。最后一点不用说了,通过AI技术把老片子做非常好的质量的提升。
搜索体验,我举一个爱奇艺比较火爆的例子《狂飙》。高启强什么时候黑化的?传统搜索是无法通过这个问题为你搜出准确视频的。有了语义理解之后就输入自然语言,它能精准定义到那一集,这是整个AI技术带给我们革命性东西。
广告制作跟用户投放是同样道理的,刚才那是爱奇艺出去投广告,这部分是我们怎么帮助广告主海量生成非常个性化的广告素材。
播放体验体上,我们看到绿镜这是爱奇艺长期有专利的产品,我们识别出剧情中哪些是冲突点、高潮点,有底下的曲线作为提示,用户可以选择更想观看的点。
时间有限,很希望有机会跟各位同仁做更多的沟通,谢谢钛媒体,谢谢各位。