AIPython★ 1,290⑂ 137 форковApache-2.0
NVIDIA-NeMo/labs-molt
LABS-MOLT: АГЕНТНЫЙ RL ФРЕЙМВОРК ДЛЯ ИССЛЕДОВАНИЙ
Масштабируемый фреймворк для агентного RL, построенный на HuggingFace и поддерживающий контекст‑ и эксперт‑параллелизм с FSDP. Содержит 9 000 строк Python и уже имеет 1 164 звёзды на GitHub.
// КЛЮЧЕВЫЕ ОСОБЕННОСТИ
- Обучает агентов RL на больших LM через HuggingFace Transformers.
- Реализует контекст‑ и эксперт‑параллелизм для распределённого обучения на множестве GPU.
- Использует FSDP для шардинга моделей и снижения потребления GPU‑памяти.
- Предлагает CLI и Python‑API для запуска экспериментов с логгированием в Weights & Biases.
#agentic-rl#context-parallelism#expert-parallelism#fsdp#huggingface#llm#rl-framework#rlhf#rlvr#tensor-parallelism
Открыть на GitHub →Новые репозитории каждые 30 минут
REDDYX AI сканирует GitHub 24/7 и присылает лучшие AI/ML/Web3 проекты в Telegram.
Подписаться в Telegram