OneDiffusion是AI2推出的多功能大规模扩散模型,能无缝支持双向图像合成和理解,涵盖文本到图像生成、条件图像生成、图像理解等多种任务。基于将所有条件和目标图像建模为序列“视图”训练,实现在推理时任意帧作为条件图像的能力。OneDiffusion以其统一的训练框架、可扩展性和对多任务的支持,提供一种通用的视觉模型解决方案。

OneDiffusion – 无缝支持双向图像合成和理解的开源扩散模型  第1张
(图片来源网络,侵删)
OneDiffusion – 无缝支持双向图像合成和理解的开源扩散模型  第2张
(图片来源网络,侵删)