La IA y los problemas difíciles del mundo · Ciencias de la vida · arXiv · 2026-10-21
VGL-stGen: Aprendizaje de un modelo multimodal compartido para histología pulmonar y transcriptómica espacial
Título original: VGL-stGen: Learning a shared multimodal model for lung histology and spatial transcriptomics
VGL-stGen es un modelo lingüístico de gran escala multimodal adaptado a partir de un modelo de visión-lenguaje médico preentrenado utilizando H&E pulmonar emparejado y transcriptómica espacial con referencias de célula única. Las pseudoetiquetas condicionadas por genes transfieren la supervisión de tipos celulares transcriptómicos a imágenes histológicas, y un único checkpoint desplegado soporta trece tareas evaluadas que abarcan la clasificación de tejidos y tipos celulares, la predicción de genes y la finalización condicional de expresión. Los experimentos de permutación de imágenes indican que la histología correctamente emparejada añade información más allá de la expresión observada, aunque la clasificación externa depende en parte de referencias computacionales con un linaje de anotación compartido.