真的是太牛逼了,openai 刚发布 sora ,外界还在各种猜测发布事件,甚至去排队申请红蓝对抗测试,以期望获得 sora 内测的测试资格。
第一个是无条件生成 介绍是:在 Taichi-HD (256 x 256)、FaceForensics (256 x 256) 和 SkyTimelapse (256 x 256) 数据集上无条件生成视频。 从demo来看,太极高清面部模糊变形,但是打太极的动作还算连贯。 距离的人脸表现还不错,天空延时摄影和实拍没什么区别。 第二个是基于类的条件生成 介绍是:给定课程,Latte 能够生成所需的视频。结果显示在 UCF101 (256 x 256) 数据集上。 给出的demo中,包含了日常生活中的各方面动作,第一个跳绳因为动作幅度较大有一点瑕疵,其他表现都还不错。 第三个是根据条件生成 结果通过使用 Latte 生成分布式视频来显示。 可以说这个已经非常接近 sora了。 我猜测,还是数据集有差异,但是已经很牛逼了,四天就复现出来了,如果随着事件推移,国内资金的涌入,数据集的优化应该很快就能追上。 项目已开源,赶紧尝鲜吧。
我是段老湿,正在打造自己的第三曲线,如果你有想法,不知道如何行动,也怕踩坑,欢迎加入我的免费星球,分享成长路上的坎坷。 |
|