AIJavaScript★ 72⑂ 21 форковApache-2.0
dreamers-laboratory/ai-evaluation-framework
Фреймворк оценки ИИ
Библиотека для сравнения моделей по точности, задержке p95 и стоимости, предоставляющая оценку каждой переменной на основе эталонных данных.
// КЛЮЧЕВЫЕ ОСОБЕННОСТИ
- Измеряет точность (accuracy) моделей с детальной разбивкой по полям.
- Вычисляет 95‑процентный перцентиль задержки (latency p95) и среднюю стоимость inference.
- Сопоставляет результаты с эталонными ground‑truth данными для каждого атрибута.
- Генерирует отчёты в JSON/CSV, совместимые с CI/CD пайплайнами.
Новые репозитории каждые 30 минут
REDDYX AI сканирует GitHub 24/7 и присылает лучшие AI/ML/Web3 проекты в Telegram.
Подписаться в Telegram