Levent Bulut ha actualizado la definición operativa del "sesgo de resumen", pasando de una descripción vaga a un constructo comprobable, estableciendo un protocolo de investigación registrado con falsificadores preespecificados. La nueva definición caracteriza el sesgo como la tendencia sistemática de los modelos a reemplazar la estructura del modo mostrado con etiquetas de resumen abstractas (modo contado), en lugar de simplemente eliminar detalles.

  • El constructo se define como el reemplazo de la estructura mostrada reconstruible por la etiqueta de resumen abstracta que nombra su contenido, favoreciendo específicamente las declaraciones "contadas" sobre los indicios físicos "mostrados".
  • El protocolo requiere 20 pares emparejados de estímulos escritos por humanos y evaluación por al menos tres familias de modelos utilizando jueces LLM.
  • Se establece un falsificador clave: si los modelos no muestran preferencia por el modo contado en comparación con los humanos (Cohen’s h ≥ 0.3 u OR ≥ 2), el constructo será retirado.
  • Se incluyen comprobaciones de discriminante para asegurar que el sesgo se disocie de la verbosidad y la sicolofancia, volviendo a ejecutar las pruebas con pares desequilibrados en longitud y marcos variados.

Bulut busca críticas al diseño, específicamente respecto a si el emparejamiento por longitud separa suficientemente esto del sesgo de verbosidad y si el Índice de Información Suprimida es el instrumento correcto para medir la carga inferencial.