R_REDDYX.XYZ
AIRust★ 1,257⑂ 101 форковAGPL-3.0

fastcrw/crw

БЫСТРЫЙ АЛЬТЕРНАТИВ FIRECRAWL НА RUST

crw — быстрый аналог Firecrawl/Tavily на Rust: веб‑скрейпер, краулер и поисковый API с MCP‑сервером для AI‑агентов. Совместимый API (/scrape, /crawl, /search), в 2,3× быстрее Tavily и в 1,5× быстрее Firecrawl на 1 000 URL, 6 МБ ОЗУ, бинарник, хостинг.

// КЛЮЧЕВЫЕ ОСОБЕННОСТИ

  • Одностраничный скрейп: endpoint /scrape возвращает чистый markdown/HTML за миллисекунды.
  • Рекурсивный краулер: /crawl обходит сайт до заданной глубины, соблюдая robots.txt и sitemap.
  • Поисковый API: /search выдаёт ранжированные результаты с сниппетами, совместимый с Tavily.
  • MCP‑сервер для AI‑агентов: предоставляет инструменты scrape, crawl, search через стандартный MCP.
#ai#ai-agents#crawler#data-extraction#docker#firecrawl-alternative#html-to-markdown#llm#markdown#mcp#mcp-server#rust
Открыть на GitHub →

Новые репозитории каждые 30 минут

REDDYX AI сканирует GitHub 24/7 и присылает лучшие AI/ML/Web3 проекты в Telegram.

Подписаться в Telegram
← Весь каталог

// ПОХОЖИЕ РЕПОЗИТОРИИ

ANGELSLIM: СЖИМАЕМ МОДЕЛИ БЕЗ ПОТЕРЬ★ 1257BRIAN2 СИМУЛЯТОР СПИКОВЫХ СЕТЕЙ★ 1258NAUTILUS COMPASS: НАДЁЖНЫЙ МУЛЬТИ-АГЕНТ★ 1258ОДИН ИНТЕРФЕЙС ДЛЯ ВСЕХ АГЕНТОВ★ 1258Библиотека навыков Claude★ 1259MAGIC: AI-АССИСТЕНТ ДЛЯ РАЗРАБОТКИ★ 1255

← ВЕСЬ КАТАЛОГ

fastcrw/crw — Быстрый альтернатив Firecrawl на Rust