يقدم الباحثون إطار عمل BTHA، وهو محوّل هرمي قابل للنقل عبر النماذج الأساسية مصمم لفصل التوجيه اللغوي عن مشفّرات الرؤية والنصوص المحددة في تجزئة الصور الطبية.

  • يستخدم BTHA محوّلات تحافظ على الشكل لإدخال التوجيه الدلالي مع الحفاظ على واجهة مستقرة على مستوى الميزات عبر نماذج أساسية مختلفة.
  • تقدم الطريقة استراتيجية إشراف هرمي من الخشن إلى الدقيق للمحاذاة العالمية، والتوطين متعدد المقاييس، وتحسين الحدود.
  • يتحكم محوّل التوجيه الدلالي ذو البوابات المتكيف مع المقياس (SAGSG) بشكل تكيفي في حقن النص ويكبح الاستجابات عبر الوسائط الزائدة.
  • تُظهر التقييمات أن الإطار يبقى فعالاً عبر مشفّرات الرؤية القائمة على الالتفاف والمحولات، وكذلك عبر مشفّرات اللغة المتنوعة.

تُظهر التجارب على أربع مجموعات بيانات عامة أن BTHA يحسّن الأساسيات القوية الموجهة بالنص مع عبء حسابي متواضع.