StyleCrafter 是一个允许通过提供参考图片来生成任意风格的视频。该项目由清华大学和腾讯 AI 实验室合作研发。

主要特点：

1. 风格控制适配器：StyleCrafter 引入了一种风格控制适配器，使得预训练的 T2V 模型能够根据提供的参考图像生成特定风格的视频。

2. 内容与风格的解耦：为了促进内容与风格的分离，项目中从文本提示中移除了风格描述，仅从参考图像中提取风格信息。

3. 尺度自适应融合模块：设计了一个尺度自适应融合模块来平衡基于文本的内容特征和基于图像的风格特征之间的影响。

4. 高效生成高质量视频：StyleCrafter 能够高效生成与文本内容一致且风格类似于参考图像的高质量视频。

项目：gongyeliu.github.io/StyleCrafter.github.io/
论文：arxiv.org/abs/2312.00330 没有我找不到的电子书的微博视频

发布时间： 2023-12-04 17:09:24