Pollen Robotics 发布了 Grabette,这是一款开源手持设备,旨在无需机器人或遥操作支架的情况下记录现实世界的机器人操作数据。该系统使用鱼眼相机和 RGBD 深度相机来捕获 6-DoF 轨迹,允许用户生成干净的数据集,这些数据集可以通过基于浏览器的仪表板进行处理,并在 Hugging Face Hub 上共享。

该设备由标准的现成组件构建,包括 Raspberry Pi、Pi 相机和 OAK-D 深度相机,确保其低成本且可复现。数据以相机本地的 6-DoF 笛卡尔姿态和夹爪状态存储,并输出为 LeRobot 数据集格式,以便与各种学习方法兼容。此次发布包含一个示例管道,演示如何对记录的操作进行策略训练。

目标是通过使任何人都能为大型协作操作数据集做出贡献,降低机器人学习的入门门槛。通过让数据收集像录制视频一样简单,Pollen Robotics 旨在解决目前阻碍该领域的多样化现实世界数据供应问题。