清华团队“国产Sora”效果惊艳，背后创业公司已融资数亿元
清华大学联合生数科技正式发布了中国首个高一致性、高动态性视频大模型Vidu。从放出的视频来看，Vidu生成的视频效果非常惊艳，在一致性、运动幅度等方面已经达到了Sora的水准，虽然比不上Sora的时长，但整体上已经可以对标Sora。
Vidu:“画室里的一艘船驶向镜头”
Sora:“逼真的特写视频，展示两艘海盗船在一杯咖啡内航行时互相争斗的场景。”
不过，无论是Sora还是Vidu，目前都还没有正式发布，而且除了视频生成的时长以外，成功率、质量对于视频生成大模型而言也是非常重要，所以真实差距或许还有待日后仔细比较。但无论Sora还是Vidu，其更大的意义还是在于采用了新的技术。
据了解，目前市面上很多视频生成工具增加视频长度的思路是采用插帧技术，这种方法通过在原始视频帧之间插入额外的帧来提升视频的流畅度和长度，还有一些工具则主要通过组合不同的模型和技术来生成较长的视频，在一些较为简单的视频动画制作中，已经呈现出了非常不错的效果。
此前央视制作的文生视频AI动画《千秋诗颂》
但与此同时，这两种方式都可能会在内容的流畅性和视觉表现上显得不够连贯，缺乏自然的过渡效果，还会出现画质下降，尤其是在快速运动或阴影处理上的扭曲和模糊等一系列问题。
而Vidu采用了和Sora完全一致的Diffusion和Transformer融合的架构，底层基于生数自研的U-ViT架构，是第一个融合了Diffusion和Transformer的架构，据称比Sora的DiT架构早了一年。生数科技联合创始人兼CEO唐家渝表示，生数科技在3月份就实现了8秒的视频生成，在4月突破16秒，未来还将继续加速迭代。
公开数据显示，生数科技成立于2023年3月，核心团队来自清华大学人工智能研究院，还有来自北京大学、阿里巴巴、腾讯、字节跳动的多位技术人才。公司员工总数近90% 为研发人员。
去年6月，生数科技获得蚂蚁集团、BV百度风投、卓源资本的近亿元天使轮融资；8月，完成了数千万元天使+轮融资；今年3月，生数科技完成新一轮数亿元融资，由启明创投领投，达泰资本、鸿福厚德、智谱AI、老股东BV百度风投和卓源亚洲继续跟投。在三轮融资总计数亿元人民币的资本加持下，生数科技已成为目前国内多模态大模型中估值最高的初创公司之一。