LukaG712 开源自托管网页抓取 API Trapper
先了解这件事
开发者 LukaG712 在 GitHub 发布开源项目 Trapper,一个自托管的网页抓取与爬取 API,可将网站内容转为干净的 LLM-ready 数据,采用 MIT 许可。 功能上支持单页抓取、递归爬取、批量抓取、URL 发现、搜索、浏览器会话交互、多页结构化提取与提示词驱动的研究 agent。技术栈为 Fastify、BullMQ(Redis)、Playwright、Cheerio 与 Turndown,提供 Docker Compose 一键部署、robots.txt 遵循、webhook、API key 鉴权、限流及 Prometheus 指标。 项目要求配置 LLM_PROVIDER=openai 和 OPENAI_API_KEY 才能使用。仓库地址:https://github.com/LukaG712/Trapper。
AI 根据报道生成 · 2 天前更新
报道时间线
沿着报道,了解事件的不同侧面。
- GitHub · 去对齐工具与仓库LukaG712 开源自托管网页抓取 API Trapper
LukaG712 发布开源项目 Trapper,一个自托管的网页抓取与爬取 API,把网站转为干净的 LLM-ready 数据。支持单页抓取、递归爬取、批量抓取、URL 发现、搜索、浏览器会话交互、多页结构化提取与提示词驱动的研究 agent。技术栈为 Fastify、BullMQ(Redis)、Playwright、Cheerio 与 Turndown,提供 Docker Compose 一键部署、robots.txt 遵循、webhook、API key 鉴权、限流及 Prometheus 指标。仓库地址 https://github.com/LukaG712/Trapper,MIT 许可。
本事件热度走势
- 可比范围当前
- 3
- 可比范围峰值
- 1010月25日 20:00
- 近 24 小时变化
- -50%
趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。