Para peneliti menyajikan MatBind, sebuah kerangka pembelajaran kontras yang mengintegrasikan data bahan heterogen—struktur kristal, difraksi sinar-X bubuk simulasi (pXRD), densitas keadaan (DOS), dan bahasa alami—ke dalam ruang embedding terpadu. Menggunakan struktur kristal sebagai jangkar fisik pusat, model ini menyelaraskan modalitas-modalitas ini untuk memungkinkan pengambilan lintas-modal nol-tampilan yang muncul.
- Kerangka kerja ini menginduksi penyelarasan antara modalitas yang tidak pernah dipasangkan secara eksplisit selama pelatihan.
- Kinerja pengambilan meningkat secara sistematis ketika beberapa modalitas digabungkan pada saat kueri.
- Ruang embedding yang dipelajari mengatur bahan sesuai dengan sifat-sifat yang bermakna secara fisik tanpa pengawasan eksplisit.
Memperlakukan data bahan heterogen sebagai proyeksi komplementer dari satu realitas fisik memungkinkan kueri dan analisis lintas-modal yang lebih efektif.