IA e os Problemas Difíceis do Mundo · Ciências da vida · arXiv · 2026-10-21
VGL-stGen: Aprendendo um modelo multimodal compartilhado para histologia pulmonar e transcriptômica espacial
Título original: VGL-stGen: Learning a shared multimodal model for lung histology and spatial transcriptomics
VGL-stGen é um grande modelo de linguagem multimodal adaptado a partir de um modelo médico pré-treinado de visão e linguagem, utilizando histologia pulmonar H&E pareada e transcriptômica espacial com referências de célula única. Pseudorrótulos condicionados por genes transferem a supervisão de tipos celulares transcriptômicos para imagens histológicas, e um único checkpoint implantado suporta treze tarefas avaliadas que abrangem classificação de tecidos e de tipos celulares, previsão de genes e conclusão condicional de expressão. Experimentos de permutação de imagens indicam que a histologia corretamente pareada acrescenta informação além da expressão observada, embora a classificação externa dependa em parte de referências computacionais com linhagem de anotação compartilhada.