腾讯推出开源视频生成模型VideoCrafter2

共计 562 个字符，预计需要花费 2 分钟才能阅读完成。

VideoCrafter 是由腾讯和香港科技大学合作推出了一种全新的视频生成模型，可以进行创建和编辑套件，采用了扩散模型，能够从文本描述生成照片和视频。即使没有视频编辑或动画经验的人也可以轻松制作专业品质的视频。近期开发人员又推出升级版本 VideoCrafter2，旨在克服高质量视频数据的限制，训练出高质量的视频扩散模型。目前官方已经释出 Demo，但仅能生成 2 秒钟的视频。

项目主页：https://ailab-cvc.github.io/videocrafter2

论文地址：https://huggingface.co/papers/2401.09047

Demo 地址：https://huggingface.co/spaces/VideoCrafter/VideoCrafter2

Discord 地址：https://discord.com/invite/RQENrunu92

该项目提供了两种开放扩散模型，分别用于文本到视频（T2V）和图像到视频 (I2V) 任务。T2V 模型能够生成具有 1024576 分辨率的逼真且具有电影质量的视频，在质量方面胜过其他开源 T2V 模型。而 I2V 模型则旨在生成与提供的参考图像内容严格一致的视频，保留其内容、结构和风格。这是第一个能够将给定图像转化为视频剪辑并保持内容保存约束的开源 I2V 基础模型。