helloadhavan تطلق CC-FilteredCorpus لاستخراج Markdown المهيكلي من Common Crawl
قام المستخدم helloadhavan بإنشاء مجموعة بيانات تسمى CC-FilteredCorpus مصممة لتصفية Common Crawl واستخراج المحتوى كـ Markdown نظيف. تهدف المشروع إلى الحفاظ على هيكل المستند المفيد، بما في ذلك العناوين والقوائم والروابط وكتل التعليمات البرمجية والجداول، بدلاً من تسطيح كل شيء إلى نص عادي.