ピッツバーグ大学の人間工学研究ラボ（HERL）は、障害者の自立を支援するロボティクス支援移動・操作プラットフォーム（RAMMP）を主導しており、このプロジェクトにはARPA-Hから最大4,150万米ドルの資金提供がなされています。この取り組みは、高度なロボティクスとMetaのオープンソースAIビジョンモデルを統合することで、車椅子利用者のためのより安全で適応性の高い支援移動ソリューションの創出を目指しています。

  • RAMMPは、エッジデバイスでのリアルタイム環境知覚を実現するために、MetaのDINOv3とSegment Anything Model（SAM）を活用しています。
  • エンジニアらは、メモリフットプリントの削減と低精度化を用いてバッテリー駆動ハードウェア向けにこれらのモデルを最適化し、信頼性の高いリアルタイム動作を保証しています。
  • システムは、DINOv2埋め込みとSAMからの自動ラベル付けデータでファインチューニングされたRF-DETRを採用し、360度の適応型オブジェクト検出を実現しています。
  • このアプローチにより、ユーザーは周囲と自然に相互作用でき、段差やドアのボタンなどの障害物を検出することで認知負荷を軽減し、安全性を向上させます。

RAMMPチームは、強力なAIモデルをデバイス上で直接実行させることで、外部接続に依存することなく予測不可能な日常環境で支援ロボットが信頼性高く動作することを確保し、それによってユーザーの自立性を高めています。