연구자들은 건축 도면에서 재료 수량을 자동화하기 위해 컴퓨터 비전 모델과 도구 사용 에이전트 및 계층적 프로젝트 기반을 결합하도록 설계된 vision-agent 시스템인 Handoff-H1을 제시했습니다.

  • 이 시스템은 기본 요소 추출을 위한 전용 CV 모델, 이미지 작업이 가능한 에이전트 및 지식 기반 프로젝트 구조를 통합합니다.
  • Construction Blueprint Takeoff Benchmark에서의 평가는 2,009개의 검증된 라인 항목이 포함된 10세트의 주거용 도면 세트를 사용합니다.
  • Handoff-H1은 81.6%의 복합 점수를 달성하여 최전선 에이전트보다 약 20점 높으며, 77.6%를 기록한 독립 평가자보다 우수합니다.
  • 평가 하네스는 open harbor 프레임워크를 통해 공개되어 있으며, 도면 세트는 연구 목적으로 사용할 수 있습니다.

이 시스템은 vision 모델과 에이전트를 오케스트레이션함으로써 전문 평가자와 비교하여 인간 수준의 수량 정확도와 우수한 커버리지를 달성할 수 있음을 보여줍니다.