एक अध्ययन 24 GB लैपटॉप पर चलने वाले एक डिप्लॉयबल 4B जनरेटर का मूल्यांकन करता है यह निर्धारित करने के लिए कि ऑन-डिवाइस गहरी रिसर्च कार्यों में इसके उद्धरण विश्वसनीय और व्यापक क्यों हैं। रिसर्च उद्धृत दावों की विश्वसनीयता को भरोसेमंद कवरेज से अलग करती है, यह विश्लेषण करते हुए कि स्रोत एक्सपोज़र लंबाई और स्रोत गुणवत्ता इन मेट्रिक्स को कैसे प्रभावित करती हैं।
- प्रति-स्रोत एक्सपोज़र को 400 से 1500 वर्ण तक बढ़ाने से रिकवर्ड स्रोतों पर विश्वसनीयता 0.45 से 0.58 तक और गोल्ड स्रोतों पर 0.37 से 0.58 तक बढ़ जाती है, जो दर्शाता है कि विश्वसनीयता स्रोत की सही होने के बजाय एक्सपोज़र द्वारा सीमित है।
- रिकवर्ड स्रोतों पर भरोसेमंद कवरेज एक्सपोज़र से स्वतंत्र रूप से 0.22 के आसपास बना रहता है क्योंकि रिकॉल को 0.40 के आसपास रखा गया है, जो संकेत देता है कि रिकवरी की गुणवत्ता यह सीमित करती है कि किन स्रोतों का उद्धरण दिया जाता है।
- अतिरिक्त एक्सपोज़र लगभग 235 आउटपुट टोकन खर्च करता है।
लेखकों ने निष्कर्ष निकाला कि व्यावहारिक दृष्टिकोण पहले प्रति-स्रोत एक्सपोज़र को एक सस्ता लीवर के रूप में बढ़ाना है, और फिर कवरेज को बेहतर बनाने के लिए रिकवरी रिकॉल को एकमात्र शेष कारक के रूप में मानना है।