NVIDIA разработала нейронную сеть для управления телом робота
Нам, людям, требуется огромное количество обработки информации, чтобы просто ходить, держать равновесие и двигать руками и ногами в нужных направлениях.
Nvidia упаковали это в HOVER - единую модель, которая учится координировать моторы гуманоидного робота для передвижения и манипуляций.
HOVER состоит всего из 1,5 млн параметров. Обучение HOVER проходило в NVIDIA Isaac - симуляторе на базе GPU, который ускоряет физические процессы в 10 000 раз быстрее реального времени. Год интенсивных тренировок робота сжимается до 50 минут реального времени. Обучение происходит в виртуальном "додзё".
Режимы управления:
HOVER поддерживает различные способы управления роботом через так называемые "режимы контроля".
Интеграция с XR-устройствами
Поддержка Apple Vision Pro.
Точное отслеживание движений.
Совместимость с экзоскелетами.
Прецизионный контроль положения каждого сустава.
Интуитивное управление движением.
Что даёт HOVER:
- Единый интерфейс для управления роботом через любые удобные устройства ввода
- Более простой способ собирать данные телеуправления всем телом для обучения
- Возможность использовать модель Vision-Language-Action для создания инструкций движения, которые HOVER преобразует в сигналы моторов на высокой частоте
HOVER работает с любым гуманоидом, которого можно симулировать в Isaac.
Нам, людям, требуется огромное количество обработки информации, чтобы просто ходить, держать равновесие и двигать руками и ногами в нужных направлениях.
Nvidia упаковали это в HOVER - единую модель, которая учится координировать моторы гуманоидного робота для передвижения и манипуляций.
HOVER состоит всего из 1,5 млн параметров. Обучение HOVER проходило в NVIDIA Isaac - симуляторе на базе GPU, который ускоряет физические процессы в 10 000 раз быстрее реального времени. Год интенсивных тренировок робота сжимается до 50 минут реального времени. Обучение происходит в виртуальном "додзё".
Режимы управления:
HOVER поддерживает различные способы управления роботом через так называемые "режимы контроля".
Интеграция с XR-устройствами
Поддержка Apple Vision Pro.
Точное отслеживание движений.
Совместимость с экзоскелетами.
Прецизионный контроль положения каждого сустава.
Интуитивное управление движением.
Что даёт HOVER:
- Единый интерфейс для управления роботом через любые удобные устройства ввода
- Более простой способ собирать данные телеуправления всем телом для обучения
- Возможность использовать модель Vision-Language-Action для создания инструкций движения, которые HOVER преобразует в сигналы моторов на высокой частоте
HOVER работает с любым гуманоидом, которого можно симулировать в Isaac.