AI 與世界的難題 · 生命科學 · arXiv · 2026-10-21
VGL-stGen：為肺部組織學與空間轉錄組學習共享的多模態模型
原標題: VGL-stGen: Learning a shared multimodal model for lung histology and spatial transcriptomics
VGL-stGen 是一個多模態大型語言模型，由預訓練的醫學視覺語言模型改編而來，使用成對的肺部 H&E 影像與空間轉錄組，並搭配單細胞參考。以基因為條件的偽標籤將轉錄組層級的細胞類型監督轉移至組織學影像，而單一已部署的檢查點即可支援十三項受評估任務，涵蓋組織與細胞類型分類、基因預測，以及條件式表現補全。影像排列實驗顯示，正確配對的組織學影像能提供超越觀測表現的額外資訊，但外部分類在某程度上仍依賴具有共享註解譜系的計算參考。