Los investigadores presentan Handoff-H1, un sistema vision-agent diseñado para automatizar los recuentos de cantidades de materiales a partir de planos arquitectónicos combinando modelos de visión por computadora con agentes que utilizan herramientas y una base de proyecto jerárquica.

  • El sistema integra modelos CV diseñados específicamente para la extracción de primitivas, agentes con operaciones de imagen y una estructura de proyecto basada en una base de conocimientos.
  • La evaluación en el Construction Blueprint Takeoff Benchmark utiliza 10 conjuntos de planos residenciales con 2.009 elementos verificados.
  • Handoff-H1 alcanza una puntuación compuesta del 81,6%, superando a los agentes de vanguardia por aproximadamente 20 puntos y a los estimadores independientes que obtuvieron un 77,6%.
  • El marco de evaluación es público a través del framework open harbor, con conjuntos de planos disponibles para uso en investigación.

El sistema demuestra que orquestar modelos vision y agentes puede lograr una precisión de cantidades cercana a la humana y una cobertura superior en comparación con los estimadores profesionales.