تقدم هذه الورقة دراسة استكشافية حول صعوبة التفسير في محادثات Discord المتعلقة بالجرائم الإلكترونية، حيث تعتمد الاتصالات الضارة غالبًا على لغة عامية ومصطلحات مشفرة.
- قام المؤلفون ببناء تفسيرات مرجعية للرسائل الصعبة تم مراجعتها من قبل خبير.
- قاموا بتقييم تفسيرات البشر والنماذج اللغوية الكبيرة (LLM) تحت ظروف سياقية مختلفة.
- وُجد أن السياق المحلي وحده غير كافٍ للبشر، بينما حسّنت المعرفة الخارجية والسياق المحادثي الموسّع التفسير بشكل كبير.
- بالنسبة للنماذج اللغوية الكبيرة، حسّن السياق المحلي أيضًا التفسير، مع أداء النماذج الأكبر بشكل أفضل.
- تقترح الدراسة تصنيفًا أوليًا للعوامل التي تجعل المحادثات الضارة صعبة التفسير.
تشير هذه النتائج إلى أنه ينبغي لتحليل المحتوى الضار أن يعامل التفسير كمشكلة تكامل أدلة بدلاً من مجرد تصنيف على مستوى الرسالة.