Pyramid-Flow是一种先进的视频生成模型,由北京大学、快手科技和北京邮电大学的研究人员联合推出。模型根据文本提示生成长达10秒、分辨率高达1280×768、帧率24帧每秒的高清视频。Pyramid-Flow的核心为创新的金字塔流匹配算法,算法将视频生成过程分解为多个不同分辨率的金字塔阶段,在最终阶段全分辨率进行处理,有效降低计算复杂度。模型基于时间金字塔设计,压缩全分辨率的历史信息提高训练效率。Pyramid-Flow支持端到端优化,用单一的统一扩散变换器(DiT)进行训练,简化模型的实现。

Pyramid-baidu09Flow – 北大、快手、北邮联合开源的AI视频生成模型  第1张
(图片来源网络,侵删)
Pyramid-baidu09Flow – 北大、快手、北邮联合开源的AI视频生成模型  第2张
(图片来源网络,侵删)