GitHub · 灵魂体仓库·· 1 小时前精选AI 评分68
Supacrawl 发布零基础设施终端爬虫工具,内置 MCP 服务器供 AI 智能体调用
radar-hooves/supacrawl
来源与原文
GitHub · 灵魂体仓库
发布时间:(北京时间)
阅读原始来源 · github.com ↗完整链接与内容说明
https://github.com/radar-hooves/supacrawl
本站目前仅有 AI 导读与摘要,未展示原文正文;技术细节、代码和完整结论请查看原始来源。
AI 导读
Supacrawl 是一个面向终端和 AI 助手的零基础设施网页爬虫 CLI 工具,pip install 即用,无需 Docker、数据库或 Redis。它内置 MCP 服务器(支持 Claude Desktop、Claude Code、Cursor、VS Code),提供 scrape、crawl、map、search、extract 等 8 个工具;反爬采用 Playwright、Patchright、Camoufox 三级引擎自动升级,附带 per-domain 策略记忆、质量信号评分、PDF 解析和 2Captcha 验证码求解;REST API 兼容 Firecrawl v2 协议,可作自托管替代后端。
推荐理由
这是一份可直接 pip install 的终端爬虫工具,README 给出了与 crawl4ai 和 Firecrawl 的逐项对比,方便自托管场景选型。
来源:GitHub · 灵魂体仓库 · github.com