TrackGo是一种先进的可控AI视频生成技术,通过用自由形状的遮罩和箭头,为用户提供了一种灵活而精确的机制来控制视频中对象的运动。技术的核心是TrackAdapter,一个高效轻量的适配器,能无缝集成到预训练的视频生成模型中。TrackAdapter的设计基于对模型时间自注意力层的观察,能准确激活与视频中运动相对应的区域。TrackGo在关键性能指标上达到了最新水平,包括视频质量、图像质量和运动忠实度。

TrackGo – 先进的可控AI视频生成技术  第1张
(图片来源网络,侵删)
TrackGo – 先进的可控AI视频生成技术  第2张
(图片来源网络,侵删)