TITAN是哈佛医学院研究团队开发的多模态全切片病理基础模型,通过视觉自监督学习和视觉-语言对齐预训练,能在无需微调或临床标签的情况下提取通用的切片表示,生成病理报告。它使用了335,645张全切片图像(WSIs)以及相应的病理报告,结合了423,122个由多模态生成型AI协作者生成的合成字幕。TITAN在多种临床任务中表现出色,包括线性探测、少样本和零样本分类、罕见癌症检索、跨模态检索和病理报告生成。

TITAN – 哈佛医学院研究推出的多模态全切片病理基础模型  第1张
(图片来源网络,侵删)
TITAN – 哈佛医学院研究推出的多模态全切片病理基础模型  第2张
(图片来源网络,侵删)