يوفر أداة memaudit تدقيقًا محليًا ومفتوح المصدر لحفظ بيانات التدريب في نماذج LLM التي تم ضبطها باستخدام Trainer أو TRL. يتناول اثنتين من مخاوف الخصوصية الحرجة: الاستدلال العضوية (الكشف عما إذا كانت بيانات معينة قد استُخدمت) والتقيؤ (التحقق مما إذا كان المحتوى يُصدر حرفيًا).
- يحقن سجلات «كناري» مسجلة مسبقًا في بيانات التدريب لتمكين الكشف.
- يتضمن فحصًا أوليًا واعيًا بـ PEFT لمنع الفشل الصامت من تضمينات LoRA المجمدة.
- يبلغ بمقاييس الاستدلال العضوية والتقيؤ، حيث قد يختلفان.
- محلي بالكامل بدون تبعيات خارجية أو متطلبات حساب.
تساعد الأداة المستخدمين على توثيق الامتثال للوائح الخصوصية من خلال تقديم أدلة ملموسة على مخاطر الحفظ بدلاً من الاعتماد على أمثلة اصطناعية.