Natural Language Processing: open-source проекты на GitHub
29 репозиториев по теме Natural Language Processing, отобранных ИИ-агентом REDDYX. У каждого — описание на русском, ключевые возможности и разбор. Отсортировано по числу звёзд.
// СМЕЖНЫЕ ТЕМЫ
🤗 Transformers
Фреймворк для определения моделей машинного обучения в тексте, зрении, аудио и мультимодальных моделях, для инференса и обучения.
★ 160,482 · PythonDATASETS - ОГРОМНАЯ БАЗА ДАННЫХ ДЛЯ ИИ
Самая большая платформа с готовыми наборами данных для обучения моделей ИИ, предоставляющая быстрые и удобные инструменты для работы с данными.
★ 21,583 · PythonDocsGPT: Приватный AI помощник
Приватная AI-платформа для агентов, ассистентов и корпоративного поиска с поддержкой множества моделей.
★ 17,882 · PythonСтруктурирование документов
Открытое ETL-решение для преобразования сложных документов в чистые структурированные форматы данных для языковых моделей.
★ 14,764 · HTMLLUDWIG - LOW-CODE AI ФРЕЙМВОРК
Создавайте LLM и нейросети без кода. Простота для кастомных AI-моделей включена!
★ 11,791 · PythonОПТИМИЗАЦИЯ И РАЗВЕРТЫВАНИЕ AI-МОДЕЛЕЙ
Инструментарий для оптимизации и развертывания моделей глубокого обучения. Поддерживает конвертацию из PyTorch, TensorFlow, ONNX и запуск на CPU, GPU и NPU Intel.
★ 11,656 · C++ARGILLA - СОЗДАЙ ДАТАСЕТЫ БЫСТРЕЕ
Argilla помогает инженерам ИИ и экспертам предметной области совместно создавать качественные наборы данных для обучения моделей.
★ 5,203 · PythonSPARK-NLP - РЕВОЛЮЦИЯ В NLP
Spark NLP предоставляет передовые модели NLP и готовые пайплайны для масштабируемой обработки текста на Scala.
★ 4,163 · ScalaAI‑ENGINEER HQ: НАУЧНЫЙ ТОЛК
Проект содержит Jupyter‑ноутбуки с методами обучения моделей, пайплайны RAG на LangChain и алгоритмы структур данных для AI‑агентов. Позволяет быстро создавать, тестирова
★ 3,780 · Jupyter NotebookЭВОЛЮЦИЯ МУЛЬТИ-АГЕНТНЫХ СИСТЕМ
EvoAgentX — фреймворк для создания саморазвивающихся ИИ-агентов с памятью. Поддерживает многоагентные сценарии и интеграцию с LLM. Звёзд на GitHub: 3.3к.
★ 3,435 · PythonLLM АГЕНТЫ: ОБЗОР ЛУЧШИХ РАБОТ
Подборка обязательных статей по агентам на больших языковых моделях.
★ 3,030OSWorld: БЕНЧМАРК ДЛЯ AI-АГЕНТОВ
OSWorld — бенчмарк для оценки мультимодальных AI-агентов в реальных компьютерных средах. Открытые задачи в настоящих ОС.
★ 2,911 · PythonSUPERLINKED INFERENCE ENGINE
Открытый сервер для инференса эмбеддингов, реранкинга и извлечения данных. 2000+ звёзд на GitHub.
★ 2,029 · PythonRAGHUB: РЕСУРСЫ И ФРЕЙМВОРКИ RAG
Сообщество собирает лучшие RAG-фреймворки, проекты и материалы для разработчиков ИИ. Вноси вклад и открывай новые решения.
★ 2,019CURATOR — ДАННЫЕ ДЛЯ POST-TRAINING
Синтетическая курация данных для дообучения LLM и структурированной экстракции информации. 1686 звёзд ⭐
★ 1,767 · PythonLLM В SPACY PIPELINE БЕЗ БОЛИ
spacy-llm подключает GPT, Claude, Cohere и открытые модели к spaCy pipeline. Настраиваете через конфиг, получаете структурированный Doc с entities и relations. Никакого к
★ 1,399 · PythonLIGHTMEM — ПАМЯТЬ ДЛЯ LLM БЕЗ ЛИШНИХ ЗАТРАТ
Легковесная генерация с расширенной памятью от авторов ICLR 2026. 934 звезды на GitHub.
★ 1,223 · PythonГИД ПО AI СИСТЕМАМ
Практический гайд по проектированию production-ready AI систем и оценке их качества для инженеров.
★ 1,132ASREVIEW - АКТИВНОЕ ОБУЧЕНИЕ ДЛЯ ОБЗОРОВ
Asreview использует активное обучение для ускорения систематических обзоров литературы, уменьшая количество необходимых чтений.
★ 1,074 · PythonЯПОНСКИЙ NLP: ТОП РЕСУРСЫ
Подборка библиотек, моделей, корпусов и датасетов для обработки японского языка на Python. Включает навыки Claude Code для быстрого поиска ресурсов.
★ 1,031KERAS HUB: МОДЕЛИ ДЛЯ КЕРАС
Платформа с готовыми предобученными моделями для Keras 3, упрощающая интеграцию ИИ в проекты.
★ 999 · PythonКак обучить свою LLM
Создайте современную LLM с нуля — каждая строка кода прокомментирована и объяснена просто, как для пятилетнего.
★ 984 · Jupyter NotebookTRUSTLLM: ОЦЕНКА НАДЁЖНОСТИ LLM
TrustLLM — набор инструментов для оценки достоверности LLM, представленный на ICML 2024. Включает benchmark‑наборы, метрики и датасеты для измерения hallucinations, смеще
★ 636 · PythonMMMU: МУЛЬТИМОДАЛЬНЫЙ БЕНЧМАРК
Оценка кода дляbenchmark MMMU, измеряющего мультидисциплинарное мультимодальное понимание и рассуждение для экспертного AGI.
★ 601 · PythonOSWorld-V2 - ИСПЫТАНИЕ АГЕНТОВ В РЕАЛЬНЫХ ЗАДАЧАХ
OSWorld 2.0 оценивает способность ИИ-агентов выполнять длительные реальные задачи на компьютере, используя только Python.
★ 421 · PythonPICOLLM - ОФЛАЙН LLM НА УСТРОЙСТВЕ
picollm позволяет выполнять LLM на устройстве благодаря экстремальной k‑битной квантизации, обеспечивая быстрый и приватный вывод без облака.
★ 320 · PythonОТКРЫТЫЙ КУРС ПО DATA SCIENCE
Открытые лекционные заметки по ИИ и Data Science в формате LaTeX, готовые к использованию в Jupyter Notebook.
★ 307 · Jupyter Notebook🔍 LIGHTHOUSE: ПОИСК МОМЕНТОВ В ВИДЕО
Удобная библиотека для воспроизводимого поиска моментов в видео и детекции хайлайтов. Поддерживает и аудио. Опубликована на EMNLP2024 Demo, ICASSP 2025 и ICASSP 2026.
★ 274 · PythonУскорение генерации текста
Быстрый и безпотерный вывод языковых моделей с использованием двойной диффузионной декодировки.
★ 46 · PythonНовые проекты по теме — в Telegram
Telegram →