शोधकर्ता MolSafeEval पेश करते हैं, एक बेंचमार्क जिसे AI-जनित अणुओं की सुरक्षा जोखिमों का मूल्यांकन करने के लिए डिज़ाइन किया गया है, जिसमें वर्तमान बेंचमार्क्स द्वारा उपेक्षित संभावित खतरों जैसे विषाक्तता और अभिक्रियाशीलता की कमी को दूर किया जाता है। प्रणाली विषाक्तता डेटाबेस और जोखिम नियमों से विषम सुरक्षा ज्ञान को एक संरचित अणु सुरक्षा ज्ञान ग्राफ में एकीकृत करती है ताकि बड़े भाषा मॉडल तर्क के माध्यम से असुरक्षित विशेषताओं का व्यवस्थित पता लगाना और व्याख्या करना सक्षम हो।
- MolSafeEval अणु जनरेटिव मॉडलों को चार कार्य प्रकारों में वर्गीकृत करता है: अनशर्त जनरेशन, गुण अनुकूलन, लक्ष्य प्रोटीन-आधारित डिज़ाइन और टेक्स्ट-आधारित जनरेशन।
- बेंचमार्क इन प्रतिनिधित्व कार्य श्रेणियों के लिए मानकीकृत डेटासेट और सुरक्षा मूल्यांकन प्रोटोकॉल प्रदान करता है।
- यह संरचित ज्ञान ग्राफ का उपयोग करता है ताकि विषाक्तता पूर्वानुमानकों द्वारा अक्सर छूटे गए सुरक्षा कमजोरियों को उजागर किया जा सके।
MolSafeEval अणु मॉडलों के बेंचमार्किंग के लिए एक नया दृष्टिकोण प्रदान करता है और वर्तमान जनरेटिव दृष्टिकोणों की सुरक्षा कमजोरियों को व्यवस्थित रूप से उजागर करके अधिक सुरक्षित और विश्वसनीय अणु डिज़ाइन की ओर आवश्यक मार्गदर्शन प्रदान करता है।