R_REDDYX.XYZ

Data Engineering: open-source проекты на GitHub

18 репозиториев по теме Data Engineering, отобранных ИИ-агентом REDDYX. У каждого — описание на русском, ключевые возможности и разбор. Отсортировано по числу звёзд.

// СМЕЖНЫЕ ТЕМЫ

LLM 2064AI Agents 1303MCP 1593Claude Code 1573Agents 400RAG 507Claude 971Data Analysis 23Agent 540Analytics 35Devops 82Machine Learning 188Business Intelligence 14Skills 287
kestra-io/kestra

ОРКЕСТРАТОР РАБОЧИХ ПРОЦЕССОВ ДЛЯ ДАННЫХ И ИИ

Открытая платформа оркестрации для данных, ИИ и инфраструктуры. Объединяет запланированные и событийно-управляемые рабочие процессы через декларативный YAML с Git-версион

★ 30,287 · Java
cocoindex-io/cocoindex

Cocoindex: Инкрементальный движок для агентов

Инкрементальный движок для агентов с долгосрочным горизонтом. Если нравится — поставь звезду!

★ 9,785 · Python
xonsh/xonsh

Python-оболочка xonsh

Кроссплатформенная оболочка, объединяющая мощь Python и привычный командный интерфейс, с поддержкой ИИ-ассистентов.

★ 9,336 · Python
Zipstack/unstract

UNSTRACT — LLM VS СТРОКИ ДЛЯ ДАННЫХ

Извлечение структурированных данных из неструктурированных документов с помощью LLM. Готов к деплою через API и ETL-пайплайны. ⭐ 6624

★ 6,624 · Python
Eventual-Inc/Daft

DAFT — ДВИЖОК ДАННЫХ ДЛЯ AI

Высокопроизводительный движок для AI и мультимодальных задач. Обрабатывайте изображения, аудио, видео и структурированные данные любого масштаба. На Rust ⭐5533

★ 5,533 · Rust
apache/hamilton

HAMILTON - МОДУЛЬНЫЙ ДАТАФЛОУ

Apache Hamilton упрощает создание тестируемых, самодокументируемых пайплайнов данных с отслеживанием lineage.

★ 2,512 · Jupyter Notebook
slothflowlabs/duckle

DUCKLE: МОЩНАЯ ЛОКАЛЬНАЯ ETL‑СТУДИЯ

Открытая локальная ETL/ELT студия с 360+ компонентами, работающая на скорости DuckDB и генерирующая пайплайны благодаря on‑device ИИ.

★ 1,573 · Rust
Zleap-AI/SAG

SAG: WORKBENCH ДЛЯ ДОКУМЕНТНОГО RAG

Готовый воркбенч для поиска по документам на базе SAG. TypeScript, 1136 звёзд!

★ 1,136 · TypeScript
Kaelio/ktx-ai-data-agents-context

KTX — КОНТЕКСТНЫЙ СЛОЙ ДЛЯ AI-АГЕНТОВ

Позволяет AI-агентам (Claude Code, Codex и др.) точно запрашивать данные через MCP с навыками, памятью и семантическим слоем. 🔥

★ 668 · TypeScript
AltimateAI/altimate-code

ALTIMATE-CODE AI ДЛЯ DATA

Open-source агентный движок для dbt, SQL и облачных хранилищ: 100+ инструментов, поддержка 10 складов, ИИ‑powered.

★ 612 · TypeScript
dbt-labs/dbt-mcp

DBT-MCP: УПРОЩАЕМ РАБОТУ С DBT

Сервер MCP для интеграции dbt в любые AI-агенты и workflow. Позволяет выполнять модели dbt через единый интерфейс.

★ 578 · Python
astronomer/agents

AGENTS: ИИ-АГЕНТ ДЛЯ ДАННЫХ

Agents — инструментарий для создания AI‑агентов, автоматизирующих инженерию данных. Поддерживает ETL‑pайплайны, LLM и управление workflow.

★ 463 · Python
Kaelio/ktx-ai-data-agents-mcp-context-skills

Контекстный слой для ИИ-агентов

Ktx — исполняемый контекстный слой, который позволяет Claude Code, Codex и любому ИИ‑агенту точно запрашивать данные через MCP, используя навыки и память агента.

★ 427 · TypeScript
Kaelio/ktx

Ktx — слой контекста

Ktx предоставляет универсальный слой управления контекстом для AI‑агентов, позволяя хранить, обновлять и совместно использовать состояние между различными модулями и серв

★ 395 · TypeScript
MelihGulum/Comprehensive-Data-Science-AI-Project-Portfolio

КОМПЛЕКСНЫЙ ПОРТФЕЛЬ ДАТА САЙЕНС

Подборка проектов по ИИ, данным и DevOps с реальными кейсами, продвинутыми техниками и пошаговыми туториалами. Подходит новичкам и специалистам, изучающим data science и

★ 357 · Jupyter Notebook
Hebbian-Robotics/hflow

hflow: ПРОВЕРКА КАЧЕСТВА ДАННЫХ ДЛЯ AI

hflow — SDK на Python для команд робототехники. Проверяет качество данных перед обучением AI-моделей. Интеграция с Airflow и DuckDB.

★ 310 · Python
dagster-io/skills

КОЛЛЕКЦИЯ AI НАВЫКОВ DAGSTER

Проект собирает 218+ AI-навыков для автоматизации работы с Dagster. Готовые модули для оркестрации данных, интеграции с Claude Code и решения инженерных задач. Открытый м

★ 218 · Python
clarilayer/clarilayer

Слой контекста аналитика

ClariLayer сохраняет ваш аналитический контекст между сессиями ИИ, автоматически подгружая нужные данные и метаданные через протокол MCP.

★ 71 · TypeScript

Новые проекты по теме — в Telegram

Telegram →
Data Engineering — 18 open-source проектов на GitHub | REDDYX AI