AI dan Masalah-Masalah Sulit Dunia · Kimia & material · Nature Computational Science · 2026-10-12
Lebih sedikit bisa lebih baik dalam memprediksi properti dengan model bahasa besar
Judul asli: Less can be more for predicting properties with large language models
Memprediksi sifat dari data koordinat-kategori, seperti energi pembentukan atau modulus elastis dari struktur kristal, merupakan inti ilmu komputasi, dan model bahasa besar (LLM) telah diterapkan untuk hal ini. Dengan menggunakan dataset sintetis dan tolok ukur MatText, para penulis menemukan bahwa LLM secara konsisten gagal menangkap informasi koordinat, sementara mampu menangani pola kategori dengan baik. Hal ini berlaku pada berbagai ukuran model hingga 70 miliar parameter, dataset hingga 2 × 10^6 struktur, dan berbagai representasi teks, dan untuk prediksi sifat yang didominasi oleh efek struktural, arsitektur geometris khusus mengungguli LLM.