RLinf/RLinf
RL ИНФРАСТРУКТУРА ДЛЯ EMBODIED И AGENTIC AI
Масштабируемая инфраструктура обучения с подкреплением для роботизированных и агентных систем. Поддерживает реальных роботов, симуляторы и VLA-модели с распределённым роллаутом.
// КЛЮЧЕВЫЕ ОСОБЕННОСТИ
- Поддержка реальных роботов: Robbyant R2, LeKiwi, ARX X5, SO-101 с телеоперацией
- Распределённый роллаут и обучение: 8 бэкендов ускорения, PhyAI, NVIDIA Isaac интеграция
- VLA-модели и алгоритмы: OpenPI π₀/π₀.₅, RLT, STEAM, OPD, RTC, DiffusionART, Psi0
- Отказоустойчивость и CEL: диагностика железа, аварийная остановка, коллективное обучение флотов
// РАЗБОР: КАК ЭТО РАБОТАЕТ
RLinf — модульная платформа с ядром rlinf.robotics для физических роботов и ускоренных бэкендов роллаута. Цикл от демонстраций через Pico VR до распределённого PPO/GRPO на GPU. Интерфейс отказоустойчивости: диагностика, автовосстановление, безопасное прерывание эпизодов.
Объединяет симуляцию (MuJoCo Warp, GenieSim, SIMPLE, RoboDojo), реальных роботов (Robbyant R2, LeKiwi, ARX X5, SO-101) и модели (OpenPI π₀/π₀.₅, Cosmos3, FastWAM, SD3, Wan2.2) в едином стеке. v0.4 добавила RLT, STEAM, OPD, RTC для пост-обучения на железе и CEL — коллективное обучение флотов без новых данных.
Нужен GPU-кластер (проверено на H800) и совместимые роботы; настройка включает калибровку, bring-up и Gym-регистрацию. Документация охватывает интеграцию с NVIDIA Isaac RL, но требует экспертизы в RL и робототехнике. Основная ОС — Linux, поддержка Windows не заявлена.
// СЦЕНАРИИ ИСПОЛЬЗОВАНИЯ
Кому пригодится: Инженерам RL и робототехники для обучения политик на железе и в симуляции
- Обучить политику манипуляции на двухруком роботе ARX X5 с телеоперацией Pico
- Запустить распределённый PPO для π₀.₅ в GenieSim с роллаутом на PhyAI бэкенде
- Внедрить отказоустойчивый роллаут на флоте Robbyant R2 с коллективным обучением CEL
Новые репозитории каждые 30 минут
REDDYX AI сканирует GitHub 24/7 и присылает лучшие AI/ML/Web3 проекты в Telegram.
Подписаться в Telegram