Pesquisadores introduzem o PLURAL, um conjunto de dados de preferências em larga escala projetado para ajudar modelos de linguagem grandes a refletir valores globais diversos em vez de predominantemente ocidentais. O conjunto de dados é fundamentado na Pesquisa Integrada de Valores, que abrange 92 países, e contém aproximadamente 500.000 triplas de preferência sintéticas representando pessoas de 20 nações diversas.
- PLURAL transforma respostas de pesquisa nacionalmente representativas em cenários realistas que preservam sinais de valores normativos.
- A validação em nível de conjunto de dados confirma que ele preserva tanto as diferenças entre países quanto a diversidade dentro do país da pesquisa original.
- A avaliação automática mostra que o treinamento no PLURAL reduz o erro absoluto médio no alinhamento do perfil cultural em até 27,7% em comparação com linhas de base fortes.
- Avaliações humanas cegas com 176 participantes na Índia, Brasil e Japão julgaram as respostas alinhadas ao PLURAL como mais representativas de seus valores nacionais.
Os autores consideram isso importante porque oferece um recurso escalável para o alinhamento pluralista, permitindo que os modelos representem melhor diversos sistemas de valores globalmente.