零创艺术留学_Sora官方报告解读 | 设计师能用AI做什么呢

当地时间2024年2月16日，OpenAI官方发布了视频生成模型Sora，它可以根据提示词生成60秒的连贯视频，其中包含高度详细的场景、复杂的摄像机运动以及充满活力的情感的多个角色，也可以根据静态图像制作动画。它还可以向前或向后延长视频时间、扩展视频以创建无限循环的视频、进行视频到视频的转换、模拟现实世界中的人、动物和环境的某些方面等。

Sora的亮点

01_可生成60S具有3D运动的视频

过去，图像和视频生成方法常常需要将视频调整大小、裁剪或修剪至标准尺寸，如4秒、256x256分辨率的视频。但Sora打破了这一常规，它直接在原始大小的数据上进行训练，从而带来了诸多优势。

在一众AI视频软件还挣扎在4s连贯性的边缘，Sora直接声明支持60s的视频生成长度。且这一分钟的视频并非单一场景，而是由多个镜头组成。更令人印象深刻的是，Sora能够确保多个镜头之间的人物、场景等保持一致性。理论上讲，Sora可以生成更长的视频，就像使用ChatGPT写文章时能够比以前写更长一样，但这可能受到算力的限制。

02_视频多角度统一

而且现在的AI工作流，都是单镜头单生成，一个视频里面，有多角度的镜头，主体还能保证完美的一致性，这在以前，是无法想象的。视频生成领域面对的一个重要挑战就是，在生成的较长的视频中保持时空连贯性和一致性。

03_模拟物理世界

Sora最逆天的，大概就是它展示了人工智能理解真实世界场景并与之互动的能力。模拟是最难解决的问题之一，需要收集、清洗数据。也因此Runway的世界模型一直毫无动静。但从下方的案例可以看出Sora已经掌握了物理规律，有时还能以简单的方式模拟影响世界状态的行为。


官方技术报告解读

01_采样的灵活性

Sora能够生成不同尺寸的视频，包括宽屏的1920x1080p视频、竖屏的1080x1920视频，以及这两者之间的所有尺寸。这意味着Sora可以直接按照不同设备的原生宽高比创建内容。这样做的好处是，无论是手机、电脑还是电视，Sora都能为它们直接制作出完美匹配的视频。

02_改进了构图与画面的组成

我们将Sora与一个版本的模型进行了比较，该模型将所有训练视频裁剪成正方形，这是训练生成模型时的常见做法。在正方形裁剪上训练的模型（左侧）有时会生成主体一部分出现在视野中的视频。相比之下，来自Sora的视频（右侧）具有改善的取景。

03_语言理解

我们将在DALL·E 3中引入的重新标注技术应用到视频上，我们也利用GPT将用户的简短提示转换成更长的详细说明，然后发送给视频模型。这使得Sora能够生成高质量的视频，准确地遵循用户的提示。

04_更多视频相关功能

在上述所有结果和我们的演示中，你可能已经注意到了文本转视频的示例。但Sora的功能远不止于此，它还能接受其他类型的输入提示，如预先存在的图像或视频。这种多样化的提示方式使Sora能够执行广泛的图像和视频编辑任务，如创建完美的循环视频、将静态图像转化为动画、向前或向后扩展视频等。

值得一提的是，Sora还能在提供图像和提示作为输入的情况下生成视频。下面展示的示例视频就是基于DALL·E 2和DALL·E 3的图像生成的。这些示例不仅证明了Sora的强大功能，还展示了它在图像和视频编辑领域的无限潜力。

设计师能用AI做什么呢

AI设计与设计师之间存在密切的关系。设计师可以利用AI技术来解决复杂的设计难题，或者在设计过程中加入AI元素，实现更具创意性的设计作品。同时，设计师也可以通过与AI设计专家的合作和学习，掌握AI设计技术和方法，提升自己的设计能力和竞争力。

我们都知道DALL·E 2、Midjourney、Stable Diffusion 等都是基于AI技术的图像生成工具，具体选择要根据你的具体需求和实际情况来决定。此外还可以加上我们的K叔第一时间获得设计提供的 AI 设计资源。

而且AI在设计领域中的应用越来越广泛，它可以在很多方面帮助设计师完成一些重复性的工作，减轻他们的工作负担，提高设计效率。具体来说，AI可以代替设计师完成以下工作：
1. 数据分析：AI可以快速地分析和处理大量的数据，帮助设计师获取更多的客户信息和市场分析数据，为设计提供更好的数据支持。

2. 布局设计：AI可以根据给定的设计要求，自动生成符合规范的页面布局设计，大大缩短了设计的时间和成本。

3. 图像处理：AI可以自动进行图像识别和分析，快速处理和编辑图像，并进行图像增强和修复等操作。

4. 品牌设计：AI可以通过算法自动生成品牌标识、色彩搭配、字体设计等品牌设计元素，帮助设计师更快地生成品牌视觉识别系统。

5. 创意思维：AI可以通过生成大量的设计元素和样式，激发设计师的创意思维，提高设计效率和创造力。需要注意的是，AI在设计领域的应用还处于初级阶段，目前AI并不能完全代替设计师完成所有的工作。在实际应用中，AI和设计师应该相互协作，发挥各自的优势，实现更好的设计效果

AI可以根据设计师简单的草图，自动补全细节，勾勒出更加精确的曲线、角度和比例，草图精度不输人工！

面对AI时代，给设计师的一些建议

面对AI时代，设计师需要不断学习和适应新的技术和工具，以保持竞争力。以下是几个建议：

1. 学习AI技术和工具：了解和掌握AI在设计领域的应用，学习AI设计工具的使用方法，以便在工作中更高效地进行创作和实现。

2. 培养创新思维：AI可以完成一些重复性的设计任务，但设计师需要发挥自己的创意和想象力，提供更独特的设计解决方案。因此，设计师需要不断培养创新思维，开拓创意空间。

3. 与客户沟通协调：AI工具虽然能够辅助设计，但客户仍然需要与设计师进行沟通和协调，讨论设计要求和方案，因此设计师需要具备良好的沟通能力和服务意识。

4. 不断学习和提升：设计行业的变化非常快速，设计师需要不断学习和提升自己的技能和知识，跟上行业的发展步伐，以保持竞争力。

在AI时代，虽然人工智能技术在许多领域都取得了巨大进步，AI可以生成一些令人惊叹的艺术作品，但是它们缺乏人类情感、思想和灵感的深度。因此，我们仍然需要艺术家与设计师在创作过程中融入自己的思想与情感，以及他们独特的创造力和个性，这才是不会被替代的灵魂存在。

艺术不仅仅是创造出美丽的作品，更重要的是传达人类情感、思想和价值观。艺术家通过自己的作品表达内心深处的感受，启发观众思考、感受并与作品产生共鸣。这种情感交流和思想碰撞是AI无法模拟的。

因此，用自己的思想与情感进行艺术设计是至关重要的。艺术家与设计师们独特视角和个性化的创造力使他们的作品具有独特的魅力和深度。

同时，我们也建议大家积极探索和运用新技术，将其融入到自己的创作过程中，以拓展艺术的边界并创造出更加丰富多彩的作品。