Simular는 멀티모달 에이전트가 실제 컴퓨터 작업을 수행하기 위한 평가인 OSWorld 벤치마크에서 오픈 에이전틱 프레임워크인 Agent S가 72.6%의 성공률을 달성했다고 발표했습니다. 이 점수는 벤치마크의 인간 수준 성능인 72.36%를 상회하며, 이 도메인에서 AI 에이전트가 인간 임계값을 넘은 것은 이번이 처음입니다.

  • Agent S는 OSWorld에서 72.6%를 달성하여 72.36%의 인간 기준선을 돌파했습니다.
  • 이 돌파구는 Behavior Best-of-N (bBoN)이라는 방법을 통해 가능했는데, 이는 여러 에이전트를 사용하여 최상의 결과를 선택하는 방식입니다.
  • 이는 1년 전 20% 전후에서 맴돌던 점수에서 상당한 진전을 의미합니다.
  • Simular는 최근 2,150만 달러의 자금을 확보했으며 Microsoft의 Windows 365 for Agents를 파일럿하고 있습니다.

Simular는 이 기술을 널리 접근 가능하게 만들어 실제 컴퓨터에서 소비자를 위한 실제 사용 사례를 풀어나가는 것을 목표로 합니다.