跳到正文
arXiv Computer Vision· Jiayi Wu, Tianfu Wang, Rui Zhao, Florian Schiffers, Zhimin Chen, Cornelia Fermuller, Yezhou Yang, Christopher Metzler, Yiannis Aloimonos·· 20 小时前AI 评分25

FreeCHROMA:从非对齐背景参考生成视频抠像合成

FreeCHROMA: Generative Chroma Keying from Unaligned Background References

AI 导读

FreeCHROMA 以参数高效方式微调预训练视频扩散模型,可从 1 至 3 张非对齐背景参考图完成生成式视频合成,前景与背景的协调在同一生成过程中完成,无需单独的重打光阶段。该模型在参考保真度、前景保持、场景融合、协调性和整体视频质量上均优于近期合成与条件视频生成基线,相机运动下提升尤为明显。训练数据由真实单目视频经前景背景分离与增强自动构建,可选文本指令用于消歧复杂空间关系与相机行为。

来源:arXiv Computer Vision · arxiv.org