StereoCrafter是腾讯AI Lab和ARC Lab共同推出的创新框架,能将单目视频(2D视频)转换为立体3D视频,满足日益增长的3D内容需求。StereoCrafter基于深度估计、视频splatting和立体视频修复三个核心步骤,实现高保真度的2D到3D视频转换。StereoCrafter用预训练的稳定视频扩散模型作为基础,针对立体视频修复任务进行微调,适应不同长度和分辨率的视频输入。StereoCrafter的开发,提升视频内容的沉浸感,为数字媒体的未来发展提供新的可能性。

StereoCrafter – 腾讯开源将任意2D视频转为立体3D视频的框架  第1张
(图片来源网络,侵删)
StereoCrafter – 腾讯开源将任意2D视频转为立体3D视频的框架  第2张
(图片来源网络,侵删)