ProvenanceGuard एक पोस्ट-जनरेशन सत्यापण परत है जो Model Context Protocol (MCP) एजेंट्स के लिए है और यह सुनिश्चित करके क्रॉस-स्रोत मिश्रण का पता लगाती है कि दावों को सही प्रमाण स्रोत से जोड़ा गया हो। सिस्टम MCP ट्रेस का विश्लेषण करता है बिना एजेंट को पुनः प्रशिक्षित किए, उत्तरों को दावों में तोड़ता है और सत्यापित करता है कि सहायक स्रोत वह मेल खाता है जो आउटपुट में नामित या संकेतित किया गया था।
- ProvenanceGuard ने 139 में से 138 दावों को पकड़ा जिन्हें मान्य विशेषज्ञों ने असमर्थित माना, जबकि सही स्रोत की पहचान लगभग 86% समय में की गई।
- समान स्रोतों के साथ एक परीक्षण में, यह ब्लॉकिंग निर्णयों के लिए 0.846 F1 स्कोर प्राप्त किया और 50.3% मामलों में सटीक स्रोतों की पहचान की।
- इसने गलत एट्रिब्यूशन के सभी 50 उदाहरणों को सफलतापूर्वक पकड़ा जहां नामित स्रोत बदल दिया गया था जबकि प्रमाण अक्षुण्ण रहा।
- सिस्टम में एक RARR-शैली की मरम्मत लूप शामिल है जिसने सभी ब्लॉक्ड उत्तरों को हल किया, हालांकि कई सुरक्षित फॉलबैक टेक्स्ट का परिणाम थे न कि सार्वभौमिक पुनर्लेखन।
यह दृष्टिकोण विश्वासनीयता स्कोर की सीमा को हल करता है प्रमाण-पत्र को दावा-दर-दावा दिखाकर, जो डेटा-संवेदनशील सेटिंग्स के लिए महत्वपूर्ण है जहां गलत एट्रिब्यूशन गलत तथ्यों के रूप में ही नुकसानदेह हो सकता है।