跳到正文
arXiv Computer Vision· Jie Huang, Xin Lu, Zihao Fan, Xiaoxiao Ma, Jun-hao Zhuang, Yuming Li, Zeyue Xue, Siming Fu, Haoran Li, Mingchen Zhong, Guohui Zhang, Shichen Ma, Yijun Liu, Jiaqi Shi, Yanwen Ma, Yaofeng Su, Haoyu Wang, Yaowei Li, Songchun Zhang, Weiyang Jin, Yuxuan Bian, Shiyi Zhang, Haojun Xu, Shuai Lu, Xin Han, Wei Tang, Haoyang Huang, Nan Duan, Xueyang Fu·· 2 小时前AI 评分58

Ultra Flash:将实时流式视频生成扩展到高分辨率

Ultra Flash: Scaling Real-Time Streaming Video Generation to High Resolutions

AI 导读

Ultra Flash 提出级联流式框架,在单 GPU 上实现 1K 分辨率约 30 FPS、2K 分辨率约 18 FPS 的实时高分辨率视频生成。其三项设计包括保持架构的 T2V-to-TV2V 超分训练范式与面向 AIGC 的数据退化流程、因果流式 latent 上采样器配合高分辨率解码器,以及先稀疏因果化与单步蒸馏再做级联流式自强制偏好优化和动态缓存管理的优化方案。

来源:arXiv Computer Vision · arxiv.org