NVIDIA 연구진은 실시간 상호작용 애플리케이션에서 고품질 3D 인간 모션 합성을 가능하게 하기 위해 설계된 스트리밍 생성 프레임워크인 ARDY를 발표했습니다. 이 시스템은 명시적 루트 특징과 잠재적 신체 임베딩을 결합하여 오프라인 정밀도와 온라인 속도 간의 격차를 해소합니다.
- 정확한 궤적 제어와 효율적인 생성 학습 사이의 균형을 맞추는 하이브리드 표현을 활용합니다.
- 가변 히스토리 컨텍스트를 처리할 수 있는 2단계 자기회귀 트랜스포머 디노이저를 사용합니다.
- 유연한 장기간 운동학적 제약 조건과 온라인 텍스트 프롬프트에 대한 조건부 생성을 지원합니다.
- 제어 가능한 생성을 본질적으로 학습하도록 대규모 모션 캡처 데이터로 훈련되었습니다.
- 모션 품질 및 제약 조건 준수 측면에서 HumanML3D 및 Bones Rigplay 벤치마크에서 검증되었습니다.
이 프레임워크를 통해 사용자는 동적 텍스트, 키프레임 포즈, 경로 추종 및 상호작용 로코모션을 통해 모션을 제어할 수 있으며, 애니메이션, 시뮬레이션 및 휴머노이드 로봇 공학에 적합합니다.