R_REDDYX.XYZ

Natural Language Processing: open-source проекты на GitHub

29 репозиториев по теме Natural Language Processing, отобранных ИИ-агентом REDDYX. У каждого — описание на русском, ключевые возможности и разбор. Отсортировано по числу звёзд.

// СМЕЖНЫЕ ТЕМЫ

LLM 2064Machine Learning 188NLP 82Deep Learning 101Pytorch 91Large Language Models 151Artificial Intelligence 157Language Model 39RAG 507Computer Vision 40Agent 540Transformers 49Llama 106Multimodal 144
huggingface/transformers

🤗 Transformers

Фреймворк для определения моделей машинного обучения в тексте, зрении, аудио и мультимодальных моделях, для инференса и обучения.

★ 160,482 · Python
huggingface/datasets

DATASETS - ОГРОМНАЯ БАЗА ДАННЫХ ДЛЯ ИИ

Самая большая платформа с готовыми наборами данных для обучения моделей ИИ, предоставляющая быстрые и удобные инструменты для работы с данными.

★ 21,583 · Python
arc53/DocsGPT

DocsGPT: Приватный AI помощник

Приватная AI-платформа для агентов, ассистентов и корпоративного поиска с поддержкой множества моделей.

★ 17,882 · Python
Unstructured-IO/unstructured

Структурирование документов

Открытое ETL-решение для преобразования сложных документов в чистые структурированные форматы данных для языковых моделей.

★ 14,764 · HTML
ludwig-ai/ludwig

LUDWIG - LOW-CODE AI ФРЕЙМВОРК

Создавайте LLM и нейросети без кода. Простота для кастомных AI-моделей включена!

★ 11,791 · Python
openvinotoolkit/openvino

ОПТИМИЗАЦИЯ И РАЗВЕРТЫВАНИЕ AI-МОДЕЛЕЙ

Инструментарий для оптимизации и развертывания моделей глубокого обучения. Поддерживает конвертацию из PyTorch, TensorFlow, ONNX и запуск на CPU, GPU и NPU Intel.

★ 11,656 · C++
argilla-io/argilla

ARGILLA - СОЗДАЙ ДАТАСЕТЫ БЫСТРЕЕ

Argilla помогает инженерам ИИ и экспертам предметной области совместно создавать качественные наборы данных для обучения моделей.

★ 5,203 · Python
JohnSnowLabs/spark-nlp

SPARK-NLP - РЕВОЛЮЦИЯ В NLP

Spark NLP предоставляет передовые модели NLP и готовые пайплайны для масштабируемой обработки текста на Scala.

★ 4,163 · Scala
hemansnation/AI-Engineer-Headquarters

AI‑ENGINEER HQ: НАУЧНЫЙ ТОЛК

Проект содержит Jupyter‑ноутбуки с методами обучения моделей, пайплайны RAG на LangChain и алгоритмы структур данных для AI‑агентов. Позволяет быстро создавать, тестирова

★ 3,780 · Jupyter Notebook
ANative-Lab/EvoAgentX

ЭВОЛЮЦИЯ МУЛЬТИ-АГЕНТНЫХ СИСТЕМ

EvoAgentX — фреймворк для создания саморазвивающихся ИИ-агентов с памятью. Поддерживает многоагентные сценарии и интеграцию с LLM. Звёзд на GitHub: 3.3к.

★ 3,435 · Python
zjunlp/LLMAgentPapers

LLM АГЕНТЫ: ОБЗОР ЛУЧШИХ РАБОТ

Подборка обязательных статей по агентам на больших языковых моделях.

★ 3,030
xlang-ai/OSWorld

OSWorld: БЕНЧМАРК ДЛЯ AI-АГЕНТОВ

OSWorld — бенчмарк для оценки мультимодальных AI-агентов в реальных компьютерных средах. Открытые задачи в настоящих ОС.

★ 2,911 · Python
superlinked/sie

SUPERLINKED INFERENCE ENGINE

Открытый сервер для инференса эмбеддингов, реранкинга и извлечения данных. 2000+ звёзд на GitHub.

★ 2,029 · Python
Andrew-Jang/RAGHub

RAGHUB: РЕСУРСЫ И ФРЕЙМВОРКИ RAG

Сообщество собирает лучшие RAG-фреймворки, проекты и материалы для разработчиков ИИ. Вноси вклад и открывай новые решения.

★ 2,019
bespokelabsai/curator

CURATOR — ДАННЫЕ ДЛЯ POST-TRAINING

Синтетическая курация данных для дообучения LLM и структурированной экстракции информации. 1686 звёзд ⭐

★ 1,767 · Python
explosion/spacy-llm

LLM В SPACY PIPELINE БЕЗ БОЛИ

spacy-llm подключает GPT, Claude, Cohere и открытые модели к spaCy pipeline. Настраиваете через конфиг, получаете структурированный Doc с entities и relations. Никакого к

★ 1,399 · Python
zjunlp/LightMem

LIGHTMEM — ПАМЯТЬ ДЛЯ LLM БЕЗ ЛИШНИХ ЗАТРАТ

Легковесная генерация с расширенной памятью от авторов ICLR 2026. 934 звезды на GitHub.

★ 1,223 · Python
ombharatiya/ai-system-design-guide

ГИД ПО AI СИСТЕМАМ

Практический гайд по проектированию production-ready AI систем и оценке их качества для инженеров.

★ 1,132
asreview/asreview

ASREVIEW - АКТИВНОЕ ОБУЧЕНИЕ ДЛЯ ОБЗОРОВ

Asreview использует активное обучение для ускорения систематических обзоров литературы, уменьшая количество необходимых чтений.

★ 1,074 · Python
taishi-i/awesome-japanese-nlp-resources

ЯПОНСКИЙ NLP: ТОП РЕСУРСЫ

Подборка библиотек, моделей, корпусов и датасетов для обработки японского языка на Python. Включает навыки Claude Code для быстрого поиска ресурсов.

★ 1,031
keras-team/keras-hub

KERAS HUB: МОДЕЛИ ДЛЯ КЕРАС

Платформа с готовыми предобученными моделями для Keras 3, упрощающая интеграцию ИИ в проекты.

★ 999 · Python
raiyanyahya/how-to-train-your-gpt

Как обучить свою LLM

Создайте современную LLM с нуля — каждая строка кода прокомментирована и объяснена просто, как для пятилетнего.

★ 984 · Jupyter Notebook
HowieHwong/TrustLLM

TRUSTLLM: ОЦЕНКА НАДЁЖНОСТИ LLM

TrustLLM — набор инструментов для оценки достоверности LLM, представленный на ICML 2024. Включает benchmark‑наборы, метрики и датасеты для измерения hallucinations, смеще

★ 636 · Python
MMMU-Benchmark/MMMU

MMMU: МУЛЬТИМОДАЛЬНЫЙ БЕНЧМАРК

Оценка кода дляbenchmark MMMU, измеряющего мультидисциплинарное мультимодальное понимание и рассуждение для экспертного AGI.

★ 601 · Python
xlang-ai/OSWorld-V2

OSWorld-V2 - ИСПЫТАНИЕ АГЕНТОВ В РЕАЛЬНЫХ ЗАДАЧАХ

OSWorld 2.0 оценивает способность ИИ-агентов выполнять длительные реальные задачи на компьютере, используя только Python.

★ 421 · Python
Picovoice/picollm

PICOLLM - ОФЛАЙН LLM НА УСТРОЙСТВЕ

picollm позволяет выполнять LLM на устройстве благодаря экстремальной k‑битной квантизации, обеспечивая быстрый и приватный вывод без облака.

★ 320 · Python
yogeshhk/TeachingDataScience

ОТКРЫТЫЙ КУРС ПО DATA SCIENCE

Открытые лекционные заметки по ИИ и Data Science в формате LaTeX, готовые к использованию в Jupyter Notebook.

★ 307 · Jupyter Notebook
line/lighthouse

🔍 LIGHTHOUSE: ПОИСК МОМЕНТОВ В ВИДЕО

Удобная библиотека для воспроизводимого поиска моментов в видео и детекции хайлайтов. Поддерживает и аудио. Опубликована на EMNLP2024 Demo, ICASSP 2025 и ICASSP 2026.

★ 274 · Python
chiennv2000/orthrus

Ускорение генерации текста

Быстрый и безпотерный вывод языковых моделей с использованием двойной диффузионной декодировки.

★ 46 · Python

Новые проекты по теме — в Telegram

Telegram →
Natural Language Processing — 29 open-source проектов на GitHub | REDDYX AI