Un estudio que analizó 2.053 conversaciones reales entre pacientes y chatbots revela que los patrones de comunicación y la expresión emocional varían ampliamente entre los usuarios, desafiando la dependencia de pacientes simulados idealizados en el desarrollo de IA. Los investigadores desarrollaron un simulador que modela el contenido clínico, la emoción, la estrategia y el estilo, el cual produjo conversaciones casi indistinguibles de las reales en una evaluación inspirada en la prueba de Turing.
- El análisis de 2.053 conversaciones reales mostró una variación significativa en los patrones de comunicación y la expresión emocional entre usuarios.
- Un nuevo simulador de pacientes modela por separado el contenido clínico, el estado emocional, la estrategia conversacional y el estilo de comunicación.
- En una evaluación inspirada en la prueba de Turing con 15 evaluadores humanos, las conversaciones simuladas lograron una precisión de clasificación de solo el 55%.
- Al probar cuatro LLM en 1.164 casos calificados por médicos utilizando cinco personificaciones distintas de pacientes, se encontró que el estilo de comunicación altera significativamente los resultados del triaje.
Los autores argumentan que la IA conversacional centrada en el paciente debe acomodar la diversidad comunicativa para evitar un rendimiento deficiente y amplificar las disparidades en salud al desplegarse en el mundo real.