WebClaw - 专为 AI Agent 打造的极速爬虫

Type: article
Author: unknown
Primary Topic: AI Agent 爬虫工具
Ingested: 2026-04-26

Summary

WebClaw 是一款专为 AI Agent 场景设计的轻量级爬虫工具，通过纯 HTTP 抓取实现亚毫秒级响应，无需依赖 Playwright 等浏览器环境。相比同类工具可节省约 67% 的 Token 消耗，并支持通过 MCP 协议直接在 Claude Code 等 AI 工具中调用。适合对 Token 成本敏感、无需处理重度 JS 渲染页面的高频抓取任务，采用 AGPL-3.0 协议。

Key Concepts

亚毫秒级响应
无浏览器爬取
MCP集成
Token消耗优化
AI Agent工具链
HTTP抓取

Entities

WebClaw
Claude Code
Playwright
Puppeteer
repomix
xcrawl
StockX

Source

Raw: webclaw-ai-agent-crawler.md

Relations

(none)