أطلقت إنفيديا Cosmos 3 Edge، وهو نموذج عالم مفتوح بـ4 مليارات معلمة مصمم لتقديم أداء بمستوى مراكز البيانات على الأنظمة الطرفية ذات الذاكرة المحدودة. يمكّن النموذج الروبوتات ووكلاء الذكاء الاصطناعي للرؤية من فهم محيطهم، والاستدلال في الوقت الفعلي، وتوليد الإجراءات مباشرةً على أجهزة مثل وحدات NVIDIA Jetson.
- يعمل Cosmos 3 Edge بدقة تحكم الروبوت (640×360) ويولّد 32 إجراءً لكل استدلال، بينما يحقق تحكمًا في الوقت الفعلي بتردد 15 هرتز على NVIDIA Jetson Thor.
- يحتل المرتبة الأولى بين النماذج المماثلة في الحجم على VANTAGE-Bench للتحليل البصري، ويضع معيارًا جديدًا لتعلم سياسات الروبوت.
- يجمع المعمارية بين برج ذاتي الانحدار للاستدلال وبرج انتشار للتنبؤ، مع مشاركة طبقات الانتباه متعدد الوسائط لمواءمة رموز اللغة والفيديو والصوت والإجراءات.
- أصدرت إنفيديا أيضًا Cosmos 3 Edge Policy (DROID) بعد التدريب على مجموعة بيانات DROID لمهام الالتقاط والوضع، إلى جانب نقاط التفتيش المرجعية وscripts التدريب.
يتيح الإطلاق للمطورين نشر النماذج بالقرب من المستشعرات على الجهاز نفسه، باستخدام أطر عمل مفتوحة لتخصيص النموذج وتخصصه لتطبيقات الذكاء الاصطناعي المادي المحددة.