Adobe即将推出的基于生成式AI的文本转视频工具
（爱云资讯消息）Adobe预先展示了一些即将推出的生成式AI视频工具，其中包括一个新功能，可以从静止图像中生成视频片段。这一最新预览是在软件巨头在4月份展示的正在开发的Firefly视频模型的基础上构建的，该模型将为Adobe Creative Cloud应用程序中的AI视频和音频编辑功能提供算力。
新的宣传预告展示了Firefly的文本到视频功能生成的视频片段，这是Adobe公司今年早些时候宣布的功能。该工具允许用户使用文本描述生成视频片段，并使用各种摄像机控制选项来模拟不同的摄像角度、运动和拍摄距离，以调整生成的视频片段。Firefly视频模型还展示了从特定参考图像生成视频片段的功能。Adobe公司表示，这一功能可能对制作额外的B-roll镜头或填补生产时间表中的空缺有所帮助。
如果根据示例视频来判断最终发布的效果，那么生成的视频质量与我们目前从OpenAI的Sora模型中看到的质量相当，Adobe也在将其作为Premiere Pro视频软件的第三方集成进行探索。不过，Adobe的生成式AI副总裁Alexandru Costin告诉外媒，由文本转视频和图像转视频功能生成的视频最长只有5秒。
Adobe自己的模型可能在与Sora的竞争中有一个优势，那就是Firefly由于是在公开许可、公共领域和Adobe Stock内容上进行训练的，因此被承诺是商业安全的，这可能有助于减少一些关于版权问题的困扰。
文字转视频和图像转视频功能将在今年晚些时候以独立Firefly应用程序的形式推出测试版。Adobe表示，新的Firefly视频模型最终将整合到其Creative Cloud、Experience Cloud和Adobe Express应用程序中。
Adobe还展示了一些即将推出的Premiere Pro生成扩展功能的额外片段，该功能可以像Photoshop的Generative Expand工具扩展图像背景一样扩展现有视频片段。Adobe表示，该功能也将在今年晚些时候的某个时候发布。