AIPython★ 451⑂ 30 форковApache-2.0
luyug/GradCache
GradCache: Кэширование градиентов
Библиотека для эффективного обучения с большими батчами в контрастивном обучении, преодолевающая ограничения памяти GPU/TPU через кэширование градиентов.
// КЛЮЧЕВЫЕ ОСОБЕННОСТИ
- Обучение большими батчами при ограниченной памяти
- Поддержка контрастивного обучения (SimCLR, MoCo и др.)
- Интеграция с PyTorch и совместимость с распределённым обучением
#contrastive-learning#deep-learning#embedding#flax#jax#large-language-models#pytorch#vector-database
Открыть на GitHub →Новые репозитории каждые 30 минут
REDDYX AI сканирует GitHub 24/7 и присылает лучшие AI/ML/Web3 проекты в Telegram.
Подписаться в Telegram