Данные о многоэтапных задачах, выполняемых домашними роботами.
Демонстрация многоэтапных бытовых задач с использованием графов задач, состояний объектов и меток восстановления для домашних роботов и VLA с длительным горизонтом планирования. Разработка программы с помощью Shaip.
Спецификации набора данных
| Целевые команды покупателей | Руководитель направления «Домашняя робототехника»; Руководитель исследовательского направления VLA; Группа по политике в области робототехники; Разработка продукции |
| Типичные задачи | Приготовление пищи, уборка, стирка, организация пространства, сервировка стола и работа с бытовой техникой. |
| Захват / Режимы | Эгоцентрическое + экзоцентрическое видео; опционально датчики глубины, звука, положения руки и состояния объекта. |
| Аннотации / Метаданные | График задачи, подцели, состояния объекта, описание действий, шаги по достижению успеха/неудачи и восстановлению. |
| Форматы доставки | Граф задач в формате MP4 + JSON/Parquet; совместимые с LeRobot эпизоды только там, где существует состояние/действие робота. |
| Масштаб (иллюстративный)* | 500–3,000 демонстрационных часов |
| Участники / Операторы | 200–1,000 участников |
| Задачи / Сценарии | 50–150 задач |
| Объекты / Места / Виды | 20–100 сред |
| Рекомендуемый объем работ | 100–250 часов, распределенных на 10–20 задач и 5–10 условий. |
Стандартизированное расширение эгоцентрических, экзоцентрических и процедурных методов захвата информации, предложенных Шаипом.
Посмотреть соответствующий пример из практики →Где используется этот набор данных
Этот набор данных о бытовых роботах создан для команд, обучающих домашних роботов и долгосрочные модели VLA реалистичным многоэтапным задачам, таким как приготовление пищи, уборка, стирка и наведение порядка. Компании, занимающиеся домашней робототехникой, и лаборатории воплощенного ИИ используют этот набор данных о задачах в домашних условиях для планирования задач, декомпозиции подцелей, восстановления после ошибок и обучения политике манипулирования в долгосрочной перспективе. Если вы используете данные для обучения домашних роботов, набор данных о процедурных задачах или данные о бытовых задачах с воплощенным ИИ, содержащие графы задач, состояния объектов и метки восстановления, этот набор данных предоставляет демонстрации, которые отражают то, как задачи фактически разворачиваются в реальных домах.
Связанные наборы данных по физическому ИИ
Запросите образец демонстрационного набора данных по долгосрочному плану развития домохозяйств.
Расскажите нам о роботе или системе физического искусственного интеллекта, которую вы разрабатываете, и мы ответим вам, предоставив примеры использования, технические характеристики и предложение, соответствующее вашей задаче.
* * обозначает обязательные поля