El autor propone un conjunto de estándares de informe para artículos sobre ataques Vision-Language-Action (VLA) para mejorar la transparencia y comparabilidad de los resultados. La propuesta argumenta que la literatura actual a menudo carece de datos base esenciales y contexto estadístico, lo que lleva a afirmaciones ambiguas sobre la eficacia del ataque.

Los requisitos clave incluyen:

  • Informar una tasa de control benigno coincidente en la misma tarea y semilla sin resta.
  • Usar intervalos de Wilson para las tasas de éxito sobre tamaños de muestra pequeños (por ejemplo, n=50) en lugar de aproximaciones normales.
  • Declarar explícitamente si el objetivo era un stub, un punto de control local o un modelo alojado para aclarar las afirmaciones de transferencia.
  • Incluir presupuestos de consulta en las tablas de resultados para ataques basados en búsqueda para contextualizar los conteos de fallos.

El autor busca comentarios de la comunidad sobre si estos estándares son apropiados y pregunta si otros subcampos ya emplean prácticas de informe similares.