AI 视频生成赛道自 2023 年开始升温,又在今年被 Sora 点爆,而后热度不断翻新。创企、大厂陆续涌入战局,但似乎并非所有玩家都有机会吃到蛋糕。
解读要点
1.最近出现的 AI 视频生成工具追上 Sora 了吗?
2. 做视频生成的都有谁拿到了钱?
3. AI 视频生成创企找 PMF 的事有苗头了吗?
4. Full Stack 的 AI 视频平台快来了吗?
5. 哪些玩家可能只是在陪跑?...
最近出现的 AI 视频生成工具追上 Sora 了吗?
自 Sora 于 2024 年 2 月 16 日发布以来,其所生成视频的效果和长达 60 秒的时长引发了大量讨论,也引发了国内外研究团队和企业对 Sora 的复刻和追赶。截至 7 月下旬,国内外陆续涌现了不少看似能与 Sora 相竞争的视频生成工具。
Sora 在发布至今的半年里仍处于内测状态,无法直接访问,仅有部分被选中的艺术家、电影制作人和设计师有机会体验该系统。有 Bloomberg 的记者称其体验了 Sora 后,发现该模型还存在一些问题和挑战,如在理解和生成复杂身体部位和物理学原理方面不足,视频生成的速度缓慢等。
在 Sora 发布后,国内的 GenAI 创企陆续发布了许多对标 Sora 的视频生成工具,许多 AI 大厂也开始入局视频生成。他们的产品在时长、画面效果、编辑功能等方面均有不同层面的突破,有许多声音认为它们可作为 Sora 的「平替」,或有望超越。
5 月 9 日,字节团队将自 2023 年底开始测试的「Dreamina」文生图工具更名为「即梦」,增加了文生视频功能。即梦可以可以生成最长 12 秒的视频。快手在 6 月 发布了「可灵」视频生成模型,而后多次公布更新。Luma AI 推出了Dream Machine,Runway 推出了 Gen-3 Alpha,达摩院推出了寻光。本周,爱诗科技发布了 AI 视频产品 PixVerse V2,支持单片段 8 秒及多片段 40 秒的视频生成,可一次性生成最多五段连续视频内容,且这些视频片段在主体形象、画面风格和场景元素上能保持一致性。
表:自 Sora 后发布的视频生成工具汇总
做视频生成的都有谁拿到了钱?
Sora 发布后,AI 视频生成领域的融资活动频繁,融资金额大幅上升,即使一些公司尚未发布产品或模型升级,也未能减弱投资者的热情。自 Sora 发布以来 5 个月内,至少有 5 家 AI 视频生成领域的创企获得了超过 1 亿元人民币的融资,累计约 12 亿元人民币。Runway 也被报道正在洽谈 4.5 亿美元的融资。
爱诗科技在在今年短时间内连续获得两笔亿级资金,得到蚂蚁等知名投资方的支持。其海外版产品 PixVerse(以及 V2)被认为是 Sora 有力的竞争者。生数科技在 3 个月内连续获得两笔数亿元融资。该公司在 4 月发布了性能对标 Sora 的自研视频生成模型 Vidu,可生成 16 秒时长的视频,并在画面逼真度、一致性等方面与 Sora 相近。Sand AI 是一家新入局的创业公司,由光年之外联合创始人之一的曹越领衔。该公司尚未发布产品,但在近期被曝已于 5 月已获得数千万美元 A 轮融资。
此外,Haiper AI、Runway、Pika 等明星创企,乃至多次被传出售的 Stability AI 也都在今年获得了新的资金。
表:2024 年以来获得融资的视频生成创企
AI 视频生成创企找 PMF 的事有苗头了吗?
AI 视频生成的热度从 2023 年开始冒头,后在今年被 Sora 引爆,进而有大厂入局搅动风雨,但如何找到自己的 PMF 仍是当前视频生成赛道共同面对的挑战。
1、虽然当前国内外出现了不少具有视频生成的 AI 产品/模型,但真正能让大众使用的十分有限,而大多产品的操作形式和功能也大同小异。在此基础上,实现不同功的技术也仍有待提升。
① 诸如 Sora、寻光等产品仍处于内测阶段,而相对开放的 Runway、可灵也需要用户排队申请。
② 当前大多视频生成工具的操作方式和功能相似,集中于用户先用文字生成指令,选择画面尺寸、清晰度、风格和时间等条件,然后一键生成。也有部分产品提供了视频延续、编辑等功能。
③ 视频生成工具的技术难度当前仍主要集中在视频清晰度和生成时长上,这与训练素材质量和算力相关,也是最受关注的产品功能。
2、五源资本副总裁石允丰在 WAIC 的一场圆桌对话中表示,目前的视频生成还处于早期发展阶段,技术的底座还没有稳固时找 PMF 的挑战很大。
3、明星创企 Pika Labs 的几位核心成员在 6 月的一场专访中分享了他对当前视频生成技术、时长和产品的看法。[27]
① Pika 认为视频生成行业目前处于 70 分左右的发展阶段,尽管 Sora 是一个概念验证产品...
4、专注在短视频内容 AI 口型匹配和翻译的 HeyGen 已经通过极强的 PMF 吃到了蛋糕。HeyGen 的创始人表示,PMF 更像是一门艺术,而不是科学。
① HeyGen 在今年完成了 6000 万美元的 A 轮融资...
② 在过往一年中, HeyGen 的年度经常性收入(ARR) 从 100 万美元增长至 3500 万美元...。
③ HeyGen 的创始人 Joshua Xu 在 7 月的一场专访中表示,客户会告诉你是否找到了 PMF...
④ Joshua Xu 表示,他们开发了一个框架...
Full Stack 的 AI 视频平台快来了吗?哪些玩家可能只是在陪跑?...
订阅机器之心Pro会员通讯👇,查看完整解读
前哨王煜全 2024-09-16
302AI 2024-09-04