AI dan Masalah-Masalah Sulit Dunia · Ilmu hayat · arXiv · 2026-10-21
VGL-stGen: Mempelajari model multimodal bersama untuk histologi paru dan transkriptomika spasial
Judul asli: VGL-stGen: Learning a shared multimodal model for lung histology and spatial transcriptomics
VGL-stGen adalah model bahasa besar multimodal yang diadaptasi dari model visi-bahasa medis yang telah dilatih sebelumnya menggunakan H&E paru yang berpasangan dan transkriptomika spasial dengan referensi sel tunggal. Pseudo-label berkondisi gen mentransfer supervisi tipe sel transkriptomik ke citra histologi, dan satu checkpoint yang dideploy mendukung tiga belas tugas yang dievaluasi mencakup klasifikasi jaringan dan tipe sel, prediksi gen, serta pelengkapan ekspresi kondisional. Eksperimen permutasi citra menunjukkan bahwa histologi yang dipasangkan dengan benar menambahkan informasi melampaui ekspresi yang teramati, meskipun klasifikasi eksternal sebagian bergantung pada referensi komputasional dengan silsilah anotasi yang sama.