Los autores presentan Localized LoRA-MoE, un marco unificado que fusiona el bloqueo espacial localizado con enrutamiento dinámico condicionado al contexto para abordar las limitaciones de los métodos estándar de ajuste fino eficiente en parámetros.
- LoRA-MoE por bloques modula toda la cuadrícula estructural mediante una señal de contexto monolítica.
- LoRA-MoE por celdas empodera cada celda de coordenadas en la cuadrícula de la matriz con un enrutamiento experto localizado y autónomo.
Ambas arquitecturas resuelven puntos muertos de optimización inherentes a las líneas base estáticas en simulaciones SVD de alta dimensión y tareas de percepción visual espacial.
- El enrutamiento descentralizado a nivel de celda logra una paridad estadística completa con un coordinador global omnisciente.
El marco proporciona un "muro cortafuegos de gradiente" robusto que protege las vías supervivientes de la corrupción propagada por fallos, ofreciendo una solución escalable para la adaptación dinámica del modelo.