R_REDDYX.XYZ
AIPython★ 3,327⑂ 108 форковApache-2.0

vectara/hallucination-leaderboard

РЕЙТИНГ ХАЛЛЮЦИНАЦИЙ LLM

Проект сравнивает производительность больших языковых моделей при генерации галлюцинаций в кратких резюме документов. Он предоставляет таблицу лидеров с метриками точности и частоты выдуманных фактов.

// КЛЮЧЕВЫЕ ОСОБЕННОСТИ

  • Сравнивает LLMs по доле галлюцинаций при суммаризации документов до 500 токенов.
  • Вычисляет метрики: процент выдуманных фактов, KL‑разрыв и BLEU‑штраф за вымысел.
  • Таблица лидеров с фильтрацией по модели, набору данных и уровню галлюцинаций.
  • Код на Python с CLI, Docker‑образом и скриптами для запуска оценки.
#generative-ai#hallucinations#llm
Открыть на GitHub →

Новые репозитории каждые 30 минут

REDDYX AI сканирует GitHub 24/7 и присылает лучшие AI/ML/Web3 проекты в Telegram.

Подписаться в Telegram
← Весь каталог

// ПОХОЖИЕ РЕПОЗИТОРИИ

KICAD MCP: ИИ ПРОЕКТИРУЕТ ПЛАТЫ★ 3327SIDEKICK: ЛОКАЛЬНЫЙ AI ЧАТ★ 3324Инструменты Claude★ 3331ЛУБОЙ ТОПИК В ВИДЕО★ 3321PY-XIAOZHI - AI АССИСТЕНТ С ГОЛОСОМ★ 3335Высокопроизводительный инференс на GPU★ 3339

← ВЕСЬ КАТАЛОГ

vectara/hallucination-leaderboard — Рейтинг халлюцинаций LLM