शोधकर्ताओं ने Q-BridgeNet का प्रस्ताव रखा है, जो बहुभाषी साइन भाषा अनुवाद के लिए एक एकीकृत फ्रेमवर्क है जो साइन और बोली जाने वाली भाषा दोनों पक्षों पर अंतर-भाषिक संघर्षों को सहज रूप से कम करता है।
- साइन पक्ष पर, यह साझा और भाषा-विशिष्ट कोडबुक्स का उपयोग करके अनुकूलन खंडीकरण और अवशेष सदिश क्वांटीकरण के माध्यम से विविक्त Q-units सीखता है।
- बोली जाने वाली भाषा पक्ष पर, एक बहुभाषी LLM को अंतर-भाषिक प्रायर्स का लाभ उठाते हुए Q-unit स्पेस में काम करने के लिए फाइन-ट्यून किया जाता है।
- PHOENIX14T, How2Sign और CSL-Daily पर प्रयोगों ने स्थानीय जोड़ियों पर राज्य-कला प्रदर्शन और गैर-स्थानीय जोड़ियों पर मजबूत सामान्यीकरण दिखाया है।
यह दृष्टिकोण साझा अर्थ को पकड़ते हुए भाषा-विशिष्ट भिन्नताओं को बनाए रखते हुए विविध साइन और बोली जाने वाली भाषा समुदायों के बीच संचार को सक्षम बनाता है।