Los autores presentan PSALM, un marco de tipo "LLM-as-a-judge" diseñado para operacionalizar la doctrina de derechos de autor de la UE con el fin de evaluar la apropiación estilística en modelos de lenguaje grandes. A diferencia de las salvaguardias existentes que se centran en la memorización literal, PSALM evalúa la superposición computacional y las dimensiones estilísticas como el estilo de escritura y la voz narrativa.
- El marco utiliza diez evaluadores que cubren dimensiones estilísticas (estilo de escritura, voz narrativa) y dimensiones de contenido (personaje, trama, escena, construcción del mundo).
- También tiene en cuenta excepciones estatutarias, incluyendo parodia, pastiche, cita y scènes à faire.
- Aplicado a modelos Llama~3.2 ajustados finamente sobre obras literarias holandesas históricas traducidas, el estudio encontró que el ajuste fino induce una apropiación estilística sistemática más allá de la memorización literal.
- Se demostró que el desprendimiento mediante Optimización Negativa de Preferencias (Negative Preference Optimisation) reduce sustancialmente la similitud pero deja patrones estilísticos residuales detectables.
PSALM proporciona infraestructura para una evaluación de cumplimiento auditable e informada legalmente, puenteando estándares legales cualitativos y medición técnica cuantitativa.