OpenAI는 GPT-4o의 시각적 능력을 강화학습과 결합하여 그래픽 사용자 인터페이스와 상호작용하는 컴퓨터 사용 에이전트(CUA) 기반의 에이전트인 Operator의 연구 미리보기를 출시했습니다. CUA는 원시 픽셀 데이터를 처리하고 가상 마우스와 키보드를 사용하여 OS별 API에 의존하지 않고 다양한 디지털 환경에서 다단계 작업을 탐색합니다.
- CUA는 OSWorld에서 38.1%, WebArena에서 58.1%, WebVoyager에서 87%의 점수를 기록하며 최첨단 결과를 달성했습니다.
- 이 에이전트는 지각, 사고사유를 통한 추론, 행동의 반복 루프를 통해 작동하며 예기치 않은 변화에 적응합니다.
- 안전 조치에는 유해한 작업에 대한 거부, 금지된 사이트에 대한 차단 목록, 실시간 검토, 민감한 작업에 대한 사용자 확인이 포함됩니다.
연구 미리보기는 기술이 발전함에 따라 피드백을 수집하고 안전 조치를 정교화하기 위해 미국 내 Pro Tier 사용자에게 operator.chatgpt.com에서 제공됩니다.