AIRust★ 349
dondai44423/donsetch
DONSETCH: ВЕБ-ПОИСК ДЛЯ AI АГЕНТОВ
Donsetch — это библиотека на Rust для извлечения, поиска и сканирования веб-страниц без API‑ключей и регистрации. Поддерживает обход анти‑бот protection, работу с PDF и протокол MCP, лицензирована AGPL v3.
// КЛЮЧЕВЫЕ ОСОБЕННОСТИ
- Извлекает HTML и текст с произвольных веб‑страниц за миллисекунды.
- Выполняет полнотекстовый поиск по проиндексированному контенту с поддержкой фасетов.
- Обходит защиты от ботов (CAPTCHA, rate‑limit) и сканирует сайты в глубину.
- Извлекает данные из PDF и взаимодействует с MCP‑серверами, лицензия AGPL v3.
#agpl#ai-agents#anti-bot#crawling#mcp#pdf#rust#web-scraper#web-search
Открыть на GitHub →Новые репозитории каждые 30 минут
REDDYX AI сканирует GitHub 24/7 и присылает лучшие AI/ML/Web3 проекты в Telegram.
Подписаться в Telegram