Calibra — это инструмент с открытым исходным кодом, предназначенный для помощи исследователям в аудите наборов данных роботов и выявлении проблем с качеством перед обучением политик. Первый публичный релиз включает интерактивное пространство Robot Dataset Health Check для аудита наборов данных LeRobot и бенчмарк из 30 публичных наборов данных LeRobot с оценками здоровья.
- Robot Dataset Health Check: интерактивное пространство Hugging Face для аудита наборов данных LeRobot за секунды.
- Бенчмарк из 30 публичных наборов данных LeRobot: включает оценки здоровья, диагностику качества и сравнения сообщества.
- Возможности инструмента: выбор ко-сета с учетом качества, прогнозирование результатов обучения и Python API/CLI.
Инструмент стремится решить проблему понимания качества набора данных до начала обучения, предоставляя возможности аудита и оценки результатов.