media r/LocalLLaMA · hace 2 h

Consulta en Reddit sobre ejecutar modelos grandes con 4x-8x RTX 6000 PRO

Un usuario de Reddit busca opiniones de la comunidad sobre el rendimiento de modelos de lenguaje grandes en sistemas equipados con cuatro a ocho GPUs NVIDIA RTX 6000 PRO. La consulta se dirige específicamente a usuarios que tienen entre 384GB y 768GB de VRAM disponibles para ejecutar modelos como GLM 5.2, Kimi 2.7 y DeepSeek V4 Pro. El autor señala que, aunque estos modelos pueden ejecutarse técnicamente con cuantización de 4 bits, es posible que no quepan dentro de las limitaciones de memoria al usar precisión de 8 bits. Hace referencia a un repositorio de benchmarks pero destaca que carece de datos para los lanzamientos más recientes de modelos. Una preocupación clave planteada es si la degradación del rendimiento al usar cuantización de 4 bits frente a 8 bits es lo suficientemente significativa como para afectar tareas agénticas o de programación. El usuario también pregunta qué backends de inferencia, como vLLM o SGLang, están siendo utilizados actualmente por otros en esta configuración de hardware.

arxiv arXiv cs.CL · hace 2 h

Estructuración de un diccionario legible por máquina árabe-inglés usando gramáticas de expresión de análisis

Este artículo presenta un método para estructurar una versión legible por máquina del diccionario árabe-inglés Al-Mawrid, abordando la falta de estandarización en los formatos impresos. El enfoque convierte flujos no estructurados de palabras y puntuación en estructuras jerárquicas explícitas que definen componentes de entrada como subentradas, etiquetas de dominio y equivalencias de traducción. El análisis (parsing) sirve como paso central dentro de un diseño en cascada, implementado utilizando el formalismo de gramáticas de expresión de análisis. Esta técnica permite la organización automática o semiautomática de las entradas del diccionario a pesar de la ausencia de estandarización de la microestructura en los diccionarios árabes. El estudio demuestra que inducir la microestructura permite una precisión plausible al estructurar estos recursos léxicos complejos. Al transformar texto sin formato en formatos definidos, el trabajo respalda aplicaciones posteriores de procesamiento del lenguaje natural que requieren datos léxicos legibles por máquina.

arxiv arXiv cs.CL · hace 2 h

WBCMor VQA: Un punto de referencia bilingüe inglés-urdu para la respuesta a preguntas visuales en hematología

Los investigadores han presentado WBCMor VQA, un punto de referencia bilingüe clínicamente validado para el análisis de leucemia y glóbulos blancos normales en inglés y urdu. Este recurso aborda la brecha en las tecnologías de atención médica multilingües, particularmente en regiones como Pakistán, donde la documentación clínica a menudo no coincide con los idiomas de comunicación de los pacientes. El conjunto de datos comprende 110.000 pares de preguntas y respuestas bilingües anotados en 20.000 imágenes de células individuales de glóbulos blancos leucémicos y normales. Para garantizar la consistencia lingüística y la corrección clínica, el punto de referencia utiliza anotaciones conscientes de la morfología de los conjuntos de datos LeukemiaAttri y WBCAtt junto con un diccionario de hematología en urdu específico del dominio. El estudio también destaca las limitaciones de los recursos existentes de visión e idioma centrados en el inglés en entornos diversos de atención médica. Se establecieron métricas de rendimiento de referencia evaluando múltiples Modelos de Lenguaje Visión de código abierto en este nuevo punto de referencia. Este recurso tiene como objetivo facilitar el desarrollo de sistemas de IA accesibles para contextos médicos multilingües.

arxiv arXiv cs.CL · hace 2 h

Generación automática de resúmenes para artículos académicos mediante aprendizaje basado en prompts

Este estudio investiga el aprendizaje basado en prompts para la generación automática de resúmenes de artículos académicos con el fin de abordar la falta de datos de entrenamiento etiquetados en los métodos supervisados existentes. Los investigadores diseñaron plantillas de prompts específicas para la tarea combinadas con los resúmenes de los artículos como entradas para varios modelos de lenguaje, incluyendo GPT-2 y T5 desplegados localmente, así como ChatGPT accesible a través de API. Los experimentos realizados en tres conjuntos de datos demostraron que ChatGPT con plantillas de prompts logró un rendimiento comparable a métodos supervisados anteriores sin requerir muestras de entrenamiento específicas para la tarea. Cuando se añadieron un pequeño número de ejemplos a los prompts, el modelo superó significativamente a los métodos más avanzados en dos de los conjuntos de datos. El análisis reveló que, aunque ChatGPT posee fuertes capacidades de modelado de lenguaje, su rendimiento es altamente sensible a la información específica proporcionada dentro del prompt. Los estudios de caso indicaron que los resúmenes generados son generalmente coherentes, informativos y se asemejan estrechamente a los escritos por los autores. Este enfoque no depende de corpus de entrenamiento específicos del dominio, apoyando la minería de texto posterior y la investigación bibliométrica para artículos que carecen de resúmenes existentes.

arxiv arXiv cs.CL · hace 2 h

Medir la dificultad de la investigación en PLN: Una relación con forma de U invertida con el impacto académico

Este estudio propone un sistema de evaluación integral para medir la dificultad de la investigación académica, centrado en el Procesamiento del Lenguaje Natural como caso de estudio. Los autores extraen características internas y externas de los artículos, incluyendo colaboración, contenido y referencias, para calcular múltiples indicadores de dificultad. Estos indicadores se ponderan utilizando el método de peso de entropía y se suman para generar una puntuación final de dificultad de la investigación. El impacto académico se cuantifica mediante la frecuencia de citas, mientras que las evaluaciones de expertos validan la fiabilidad del enfoque de medición. Los resultados empíricos indican que el número de páginas, el número de referencias y la participación institucional de alto nivel se correlacionan significativamente con el impacto académico. Crucialmente, el análisis revela una relación con forma de U invertida entre la dificultad de la investigación y el impacto. Esto sugiere que la investigación moderadamente difícil tiende a lograr el mayor nivel de influencia académica.

arxiv arXiv cs.CL · hace 3 h

iLLaDA: Un modelo de lenguaje de difusión enmascarado de 8B con atención totalmente bidireccional

Los autores presentan iLLaDA, un modelo de lenguaje de difusión enmascarado de 8B parámetros entrenado desde cero utilizando atención totalmente bidireccional. Este enfoque contrasta con la factorización autoregresiva predominante y la atención causal utilizadas en los modernos modelos de lenguaje grandes. El pre-entrenamiento del modelo escaló a 12 billones de tokens, seguido de ajuste fino supervisado en un corpus de instrucciones de 25 mil millones de tokens durante 12 épocas. iLLaDA mantiene el objetivo de difusión enmascarada durante ambas fases de entrenamiento y emplea generación de longitud variable para eficiencia. También introduce puntuación basada en confianza para mejorar el rendimiento en tareas de evaluación de opción múltiple. Los resultados de los benchmarks muestran mejoras significativas sobre su predecesor, LLaDA, incluyendo ganancias de 21.6 puntos en BBH y 14.9 puntos en ARC-Challenge para el modelo base. La variante ajustada con instrucciones logró aumentos de 14.5 puntos en MATH y 16.5 puntos en HumanEval. A pesar de su naturaleza no autoregresiva, iLLaDA sigue siendo competitivo con Qwen2.5 7B en varias métricas.

arxiv arXiv cs.CL · hace 3 h

Hybrid-IR: Recuperación híbrida de doble vía con razonamiento iterativo para la respuesta a preguntas médicas complejas

Los modelos de lenguaje grandes enfrentan desafíos con las alucinaciones y el conocimiento desactualizado en aplicaciones biomédicas, lo que ha impulsado el desarrollo de métodos mejorados de generación aumentada por recuperación. Los enfoques existentes a menudo luchan con el conocimiento médico fragmentado debido a la dependencia de rutas de recuperación únicas y estrategias estáticas que dificultan el razonamiento profundo. Para abordar estas limitaciones, los investigadores introdujeron Hybrid-IR, un marco de doble vía que presenta un mecanismo iterativo de recuperación-razonamiento para la respuesta a preguntas médicas complejas. Este sistema integra la recuperación basada en grafos para explorar conocimiento estructurado junto con la recuperación densa para la coincidencia semántica fina. El modelo refina progresivamente su trayectoria de razonamiento a través de un bucle iterativo entre los pasos de recuperación y razonamiento. Los experimentos realizados en tres benchmarks ampliamente utilizados de QA médica demuestran la efectividad de este enfoque propuesto.

arxiv arXiv cs.CL · hace 3 h

Enrutamiento de Rama Local: Escalado Eficiente y Entrenable en Tiempo de Prueba para Modelos de Lenguaje

Los autores presentan el Enrutamiento de Rama Local (LBR), un marco a nivel de token diseñado para mejorar el razonamiento de los modelos de lenguaje mediante escalado eficiente en tiempo de prueba. LBR expande un pequeño árbol de anticipación local y envía todas las ramas muestreadas a través del modelo, utilizando un enrutador ligero para seleccionar el subárbol de profundidad 1 para su compromiso. Este enfoque permite que cada decisión de token utilice evidencia de futuros locales candidatos sin incurrir en los costos computacionales de la búsqueda a nivel de solución completa. El método emplea un proceso de decodificación poda-crecimiento-crecimiento que preserva las identidades discretas de las ramas y define una verosimilitud de trayectoria de árbol tratable. En consecuencia, LBR permite el aprendizaje por refuerzo de extremo a extremo con recompensas verificables, optimizando conjuntamente el modelo base y el enrutador bajo el mismo principio de razón de verosimilitud que el RLVR de tokens discretos. Los resultados experimentales en tareas sintéticas de planificación jerárquica demuestran que los estados ocultos post-candidato proporcionan evidencia útil para el enrutamiento. Además, las pruebas en razonamiento matemático muestran que LBR mejora tanto las métricas Pass@1 como Pass@32 en comparación con el pensamiento en cadena discreto y otras líneas base.

arxiv arXiv cs.CL · hace 3 h

La memoria marca la diferencia: evaluando cómo distintos roles de memoria moldean agentes conversacionales

La investigación previa sobre mecanismos de memoria en sistemas conversacionales basados en RAG se ha centrado principalmente en métodos de almacenamiento y recuperación. Este estudio investiga cómo las memorias con roles funcionales distintos influyen en la calidad de la respuesta en diferentes contextos. Los autores presentan una taxonomía fina de memoria conversacional para clasificar los elementos recuperados en tipos de roles específicos. También diseñan un marco de evaluación centrado en el usuario que simula perspectivas del usuario para abordar limitaciones en las evaluaciones basadas en referencias. Se realizaron experimentos comparativos en conjuntos de datos a largo plazo utilizando modelos de lenguaje grandes de vanguardia para analizar estos efectos. Los resultados indican que aclarar la memoria mejora la precisión factual y la conciencia de restricciones, lo que conduce a respuestas más correctas y personalizadas. Por el contrario, se encontró que la memoria irrelevante reduce la relevancia temática y degrada las capacidades de conciencia de restricciones. Estos hallazgos demuestran cómo se pueden aprovechar distintos tipos de memoria para mejorar la personalización en agentes conversacionales.

arxiv arXiv cs.CL · hace 3 h

Traducción automática neuronal para Tangkhul-Inglés de recursos limitados

Este estudio aborda la traducción automática de recursos limitados para el par de idiomas Tangkhul-Inglés, centrándose en una lengua tibeto-birmana severamente subrepresentada con infraestructura mínima previa de PLN. Los autores presentan dos sistemas: un modelo principal basado en ByT5-large y un sistema contrastivo que utiliza mT5-small, ambos ajustados finamente sobre 38,336 pares de oraciones paralelas. La evaluación en un conjunto de prueba retenido de 3,856 oraciones muestra que el sistema ByT5-large logra una puntuación BLEU de corpus de 39.97 y una puntuación chrF++ de 58.07. Las métricas adicionales incluyen una F1 de BERTScore de 0.8104 y una puntuación COMET de 0.7302 utilizando el modelo wmt22-comet-da. La investigación destaca los desafíos ortográficos relacionados con los diacríticos del alfabeto latino de Tangkhul como un obstáculo técnico específico. Además, el corpus de entrenamiento presenta sesgo de dominio, compuesto principalmente por textos bíblicos, historias y datos conversacionales. El trabajo futuro tiene como objetivo mejorar el rendimiento mediante la diversificación de datos y estrategias de adaptación de dominio.

arxiv arXiv cs.CL · hace 3 h

Sarashina2.2-TTS: Abordando la polifonía de kanji en la generación de voz japonesa mediante escalado de datos y síntesis dirigida

Sarashina2.2-TTS es un sistema de texto a voz basado en LLM centrado en japonés, diseñado para abordar el desafío lingüístico de la polifonía de kanji dependiente del contexto. El modelo escala los datos de entrenamiento a aproximadamente 361k horas, utilizando una mezcla equilibrada de corpus de voz japonesa e inglesa. Para manejar específicamente la desambiguación de lectura, los autores implementaron un pipeline de aumento de datos dirigido que cubre los 2,136 kanji de uso regular Joyo. Junto con el lanzamiento del modelo, el artículo presenta el Benchmark Joyo Kanji Yomi, que incluye 4,378 lecturas distintas para estos caracteres. Los autores también proponen Kana-CER, una métrica que evalúa la corrección de la pronunciación comparando la voz sintetizada con las lecturas de referencia en el espacio kana. Los resultados experimentales muestran que este aumento de datos dirigido mejora significativamente la precisión de lectura y alcanza un rendimiento de nivel kanji de vanguardia. El sistema iguala a las principales líneas base en la pronunciación a nivel de oración general, mientras ofrece la mayor similitud del hablante en escenarios de síntesis zero-shot. Además, las evaluaciones multilingües confirman que el enfoque de entrenamiento equilibrado garantiza una pronunciación japonesa estable independientemente del idioma del prompt utilizado.

arxiv arXiv cs.CL · hace 3 h

Estilometría computacional de traducciones al inglés del Canon Pali a través de los Pitakas

Este estudio presenta un análisis estilométrico computacional del Tipitaka en los tres Pitakas en traducción inglesa, extendiendo el trabajo previo sobre el Sutta Pitaka. El corpus comprende 134.831 segmentos de la Sutta Pitaka de Bhikkhu Sujato, la Vinaya Pitaka de Bhikkhu Brahmali, la traducción al vinaya de I.B. Horner de 1938, tres traducciones al inglés del Abhidhammattha Sangaha y textos de Vinaya trans-tradicionales. Los autores calculan distribuciones de frecuencia-rango de Zipf, diversidad léxica MATTR-500, densidad número-palabra y métricas de superposición de vocabulario. Los hallazgos principales indican que todos los corpus muestran distribuciones consistentes con Zipf con valores de R-cuadrado superiores a 0.989. La Sutta y la Vinaya Theravada exhiben puntuaciones de diversidad léxica casi idénticas de 0.399 y 0.400, mientras que el corpus Sangaha es más diverso con 0.560. El corpus Sangaha también muestra la mayor densidad número-palabra en 3.26%, reflejando su enumeración sistemática de categorías. Además, la Vinaya Mulasarvastivada comparte una superposición significativa de vocabulario con la Vinaya Theravada, mientras que dos traducciones al inglés de la misma fuente comparten solo el 24.2% de su vocabulario.

arxiv arXiv cs.CL · hace 3 h

Operadores de historia: Descomponer la transformación de original a secuela en el espacio de incrustaciones

Este estudio modela las transformaciones literarias como operaciones geométricas dentro de un espacio de incrustaciones de oraciones utilizando vectores all-mpnet-base-v2 del corpus PG19. Al calcular vectores de desplazamiento entre novelas originales y sus secuelas, el autor descompone estos cambios a lo largo de una base de contenido derivada mediante PCA. El análisis de trece pares de autores verificados revela una taxonomía de tipos de secuela: formulaica, concentrada y composicional. Las transformaciones formulaicas implican cambios mínimos en el rango, como las colecciones de Holmes de Doyle con una norma de 0.12. Los desplazamientos concentrados están dominados por un solo eje, ejemplificado por la transición de Alcott de Little Women a Little Men donde el 75% del cambio ocurre en un solo movimiento. Las transformaciones composicionales implican muchos ejes pequeños, observadas en obras de Twain, Burroughs y Nesbit. Para Tom Sawyer a Huckleberry Finn, el eje dominante es estructural, reflejando un cambio desde la domesticidad hacia la aventura picaresca más que temas superficiales como la voz vernácula. Los hallazgos geométricos se corroboran contra la intención autorial documentada de Mark Twain en cartas a Howells.

arxiv arXiv cs.CL · hace 3 h

SFL-MTSC: Aprovechando la autoconsistencia multi-tarea a nivel de fotogramas semánticos para una comprensión robusta del lenguaje hablado con múltiples intenciones

La comprensión del lenguaje hablado basada en prompts con modelos de lenguaje grandes a menudo sufre de estructuras inconsistentes de intención-slot debido a la estocasticidad del descodificado, particularmente en escenarios de múltiples intenciones. Para abordar esto, los investigadores proponen la autoconsistencia multi-tarea a nivel de fotogramas semánticos (SFL-MTSC), un nuevo marco de agregación estructurada que opera a nivel de fotograma semántico. En lugar de depender del voto mayoritario a nivel de salida, SFL-MTSC descompone las predicciones en fotogramas específicos de intención y aplica agrupación por dominio-intención junto con clustering a nivel de slot. El marco evalúa la fiabilidad del cluster utilizando puntuación de soporte de ruta para determinar qué fotogramas son confiables. Los fotogramas confiables se retienen y reintegran para formar la predicción final, asegurando una mayor consistencia estructural. Experimentos zero-shot en el conjunto de datos MAC-SLU demuestran mejoras en las puntuaciones F1 de slot y precisión general en comparación con la inferencia de un solo camino. La precisión de intención permanece mayormente estable en la mayoría de los ajustes mientras se logran estas ganancias en el rendimiento a nivel de slot.

arxiv arXiv cs.CL · hace 3 h

Encuesta de estrategias de detección y mitigación de toxicidad para modelos de lenguaje multilingües

Esta encuesta sintetiza investigaciones sobre estrategias de detección de toxicidad y desintoxicación diseñadas específicamente para modelos de lenguaje grandes multilingües. Cataloga modelos de amenaza que explotan variaciones lingüísticas como el cambio de código, diferencias ortográficas y pivotes de traducción para evadir las alineaciones de seguridad. Los autores organizan el trabajo existente en formulaciones de tareas como la reescritura tóxico-a-neutral y la clasificación, junto con varios enfoques de detección que incluyen codificadores multilingües y detectores basados en LLM. Las estrategias de mitigación se detallan a través del filtrado de datos, ajuste supervisado, dirección durante la decodificación y la implementación de barreras de seguridad multilingües. El análisis destaca desafíos persistentes en el campo, notablemente la cobertura desigual de idiomas y los protocolos de evaluación fragmentados. Además, aborda la complejidad de las definiciones culturalmente contingentes de daño y el riesgo de que los esfuerzos de desintoxicación puedan suprimir expresiones dialectales o relacionadas con la identidad legítimas.

arxiv arXiv cs.CL · hace 3 h

Presentación de los corpus Hlava Cor y Hlava AD: Variación humana en la coreferencia y las relaciones discursivas

Los investigadores han creado dos nuevos corpus, Hlava Cor y Hlava AD, para explorar la variación humana en la comprensión de la coherencia textual. Estos recursos contienen múltiples anotaciones de textos checos junto con las explicaciones de los anotadores sobre sus elecciones. El primer corpus, Hlava Cor, consta de 1,024 contextos anotados por tres personas para capturar las diferencias en la identificación de la coreferencia. Cubre pronombres, sintagmas nominales completos y adverbios anafóricos a través de varios tipos de texto y categorías gramaticales-semánticas. El segundo corpus, Hlava AD, comprende 512 contextos anotados por cinco anotadores centrados en las relaciones discursivas en construcciones atributivas y no atributivas. Ambos corpus logran un acuerdo interanotador de aproximadamente el 60-65 por ciento. El análisis revela que un menor acuerdo en la coreferencia se correlaciona con el desacuerdo de los modelos automáticos, lo que indica mayor ambigüedad. Los comentarios de los anotadores destacan además los distintos niveles de confianza y las estrategias individuales de lectura.

arxiv arXiv cs.CL · hace 3 h

La modelización del mundo autorizada por agentes alinea el entrenamiento con las necesidades de decisión

El artículo introduce la Modelización del Mundo Autorizada por Agentes (AAWM), un procedimiento de entrenamiento que aborda las limitaciones de los objetivos estándar de modelización del mundo vinculados a la predicción de la siguiente observación. Este enfoque tradicional a menudo omite dinámicas relevantes para la decisión actual de un agente porque la supervisión depende de lo que revela una transición en lugar de lo que se necesita. AAWM construye la supervisión directamente a partir de las necesidades de decisión de la política, haciendo que el agente identifique la comprensión ambiental necesaria en cada estado. La evidencia de transiciones relevantes se recupera a través de trayectorias y se sintetiza en objetivos de entrenamiento que capturan estas dinámicas orientadas a la decisión. Este método alinea el objetivo de aprendizaje con la información específica requerida antes de actuar, en lugar de forzar al modelo a reconstruir la siguiente observación. Los resultados experimentales validan la efectividad de AAWM en múltiples entornos y configuraciones de entrenamiento. Los hallazgos demuestran que los objetivos de modelización del mundo conscientes de la decisión proporcionan una señal de aprendizaje más efectiva que la predicción convencional de la siguiente observación.

arxiv arXiv cs.CL · hace 3 h

OscillaTTS: Sesgo inductivo oscilatorio adaptativo para modelar dinámicas prosódicas agudas en TTS basado en difusión

Los modelos de texto a voz (TTS) basados en difusión han mejorado la calidad del habla, pero tienen dificultades con transiciones prosódicas agudas y variaciones rápidas del tono. Los decodificadores existentes suelen utilizar no linealidades periódicas como la función de activación Snake, que carecen de adaptabilidad para cambios abruptos de amplitud y frecuencia. Para abordar esto, los autores presentan OscillaTTS, un sistema que cuenta con una no linealidad oscilatoria adaptativa. Este componente permite una modulación periódica controlada mientras garantiza la estabilidad de la señal mediante un mecanismo de derivación lineal. El estudio investiga el papel del sesgo inductivo oscilatorio dentro de los decodificadores de TTS basados en difusión. Los experimentos realizados en los conjuntos de datos LJSpeech y Emotional Speech Dataset demuestran mejoras consistentes tanto en evaluaciones objetivas como subjetivas. Estos resultados indican que OscillaTTS modela eficazmente las dinámicas prosódicas expresivas en comparación con métodos anteriores.

arxiv arXiv cs.CL · hace 3 h

Evaluación de la robustez ante dialectos japoneses en modelos de lenguaje grandes basados en habla y texto

Este estudio investiga la robustez dialectal de los modelos de lenguaje grandes (LLMs) y los modelos de lenguaje basados en habla (SLMs) utilizando los dialectos japoneses como caso de prueba. Aunque los sistemas de diálogo basados en LLMs han avanzado, la variación dialectal sigue siendo un desafío significativo, particularmente para el procesamiento de entradas habladas. La investigación define la robustez como la relación entre el rendimiento en entradas dialectales versus las estándar, lo que permite comparaciones justas entre diferentes tipos de modelos. Los experimentos revelan que la robustez de los SLMs se correlaciona directamente con la robustez de sus contrapartes LLMs basadas en texto. Además, el estudio encuentra que el entrenamiento con datos dialectales y el ajuste fino del codificador de habla sirven para mejorar la robustez en los SLMs. Estos hallazgos aclaran cómo las capacidades base de los LLMs afectan el rendimiento de los SLMs e identifican estrategias efectivas para mejorar la comprensión dialectal.

arxiv arXiv cs.CL · hace 3 h

PolicyAlign: Alineación de seguridad basada directamente en políticas para modelos de lenguaje grandes

Los autores presentan PolicyAlign, un marco diseñado para alinear modelos de lenguaje grandes directamente con políticas de seguridad en lenguaje natural, en lugar de depender de costosos datos de supervisión. Este enfoque aborda la discrepancia entre los requisitos de seguridad en rápida evolución y los métodos convencionales de alineación basados en datos. El proceso comienza sintetizando instrucciones que violan la política especificada, seguido de auto-distilación on-policy para internalizar el comportamiento deseado. Para mejorar la estabilidad del entrenamiento y la eficiencia de los datos, el método incorpora Filtrado Sensible a la Política, que selecciona las instrucciones que inducen el mayor cambio conductual. Los experimentos en múltiples modelos demuestran que PolicyAlign mejora consistentemente las métricas de seguridad mientras mantiene bajas tasas de rechazo excesivo y preserva las capacidades generales. El marco también se generaliza eficazmente a dominios especializados como escenarios de seguridad médica, legal y financiera. El código para este enfoque escalable de alineación se ha publicado en https://github.com/Qwen-Applications/PolicyAlign.