AIJupyter Notebook★ 494
Open-X-Humanoid/HEX
HEX: многомодальное управление роботом
HEX объединяет зрение, язык и действие в единую систему управления полноразмерным гуманоидным роботом, позволяя выполнять сложные задачи по голосовым и визуальным командам.
// КЛЮЧЕВЫЕ ОСОБЕННОСТИ
- Генерация координат движений всех суставов из изображения и текстовой инструкции.
- Реальное время восприятия окружения через RGB‑D камеры и сегментация объектов.
- Обучение на больших наборах данных с использованием contrastive loss и трансформеров.
- Интеграция с ROS2 для управления гуманоидным роботом в симуляции и на аппаратной платформе
#cross-embodiment#embodied-ai#humanoid-robotics#imitation-learning#multimodal-ai#vision-language-action-model#vla-model#whole-body-manipulation
Открыть на GitHub →Новые репозитории каждые 30 минут
REDDYX AI сканирует GitHub 24/7 и присылает лучшие AI/ML/Web3 проекты в Telegram.
Подписаться в Telegram