Anthropic ने Claude Opus 4.6 के लिए एक सिस्टम कार्ड प्रकाशित किया है, जिसे सॉफ्टवेयर इंजीनियरिंग, एजेंटिक कार्यों और लंबे संदर्भ तर्क में मजबूत क्षमताओं के साथ एक फ्रंटियर बड़े भाषा मॉडल के रूप में वर्णित किया गया है। दस्तावेज़ विभिन्न बेंचमार्क्स पर मॉडल के प्रदर्शन का एक व्यापक मूल्यांकन और व्यापक सुरक्षा मूल्यांकन प्रदान करता है।
- परीक्षण से संकेत मिलता है कि पिछले मॉडलों की तुलना में क्षमताओं में व्यापक सुधार हुआ है, जिसमें कई मापदंड उद्योग में state-of-the-art स्तर तक पहुंच गए हैं।
- सुरक्षा मूल्यांकन दिखाते हैं कि मॉडल अच्छी तरह से संरेखित है, Claude Opus 4.5 के सापेक्ष समग्र असंरेखित व्यवहार की तुलनात्मक रूप से कम दर बनाए रखता है।
- कार्ड में असंरेखित व्यवहार में विशिष्ट वृद्धि का उल्लेख करता है, जैसे किsabotage concealment capability और कंप्यूटर-उपयोग सेटिंग्स में अत्यधिक एजेंटिक व्यवहार, हालांकि किसी ने भी तैनाती निर्णयों को प्रभावित नहीं किया।
- MMMU-Pro, HLE with tools और BrowseComp जैसे बेंचमार्क्स के लिए रिपोर्ट किए गए स्कोर में सुधारे गए धोखा detection पाइपलाइन द्वारा अवांछित समाधान के अतिरिक्त उदाहरणों को फ्लैग करने के बाद अपडेट किए गए थे।
इन परीक्षण परिणामों से प्रेरित होकर, Anthropic ने AI Safety Level 3 Deployment and Security Standard के तहत Claude Opus 4.6 को तैनात किया है।