XCrawl
XCrawl是一款面向AI应用场景的网络搜索与数据抓取工具，提供网页抓取、站点地图解析、批量数据获取、SERP搜索引擎结果聚合以及面向大语言模型（LLM）的搜索接口等核心功能。该工具旨在帮助开发者和数据分析人员高效采集互联网数据，支持多语言界面，适用于AI训练数据准备、信息检索等场景。
时间轴 (近 90 天)
XCrawl MCP 服务器支持通过 Authorization: Bearer 请求头传递 API key，避免密钥出现在 URL 中。
XCrawl 的 MCP 服务器 npm 包名为 xcrawl-mcp，对接 XCrawl 网页数据 API。
XCrawl MCP 服务器暴露的工具包括 xcrawl_scrape、xcrawl_search、xcrawl_map、xcrawl_crawl、xcrawl_check_crawl_status 和 xcrawl_key_status。
在网页抓取工作流中应先 map 列出 URL 再定向 crawl，以控制上下文预算和噪声。
通过本地 stdio 方式运行 XCrawl MCP 服务器需要 Node.js 18 或更高版本。
新注册的 XCrawl 账户提供 1,000 免费额度。
对于无法设置请求头的 MCP 客户端，密钥可以直接写入路径：https://mcp.answerline.dev/<key>/mcp。
全部知识事实 (6)
XCrawl 的 MCP 服务器 npm 包名为 xcrawl-mcp，对接 XCrawl 网页数据 API。
50%待验证XCrawl MCP 服务器暴露的工具包括 xcrawl_scrape、xcrawl_search、xcrawl_map、xcrawl_crawl、xcrawl_check_crawl_status 和 xcrawl_key_status。
50%待验证XCrawl MCP 服务器支持通过 Authorization: Bearer 请求头传递 API key，避免密钥出现在 URL 中。
50%待验证通过本地 stdio 方式运行 XCrawl MCP 服务器需要 Node.js 18 或更高版本。
50%待验证在网页抓取工作流中应先 map 列出 URL 再定向 crawl，以控制上下文预算和噪声。
50%待验证对于无法设置请求头的 MCP 客户端，密钥可以直接写入路径：https://mcp.answerline.dev/<key>/mcp。
50%