Spider MCP服务器
AI代理最快的网络爬行、抓取和浏览器自动化服务器。让克劳德通过22个工具直接访问网络——以每秒10万页的速度抓取网站，用人工智能提取结构化数据，并通过内置的反机器人旁路控制远程浏览器。
为什么蜘蛛
- 速度 --每秒抓取100K多页。智能请求路由会自动选择HTTP或无头Chrome。流式响应立即开始传递数据。
- 成本 --按使用付费积分，核心工具无需订阅。随时通过以下方式检查您的余额
spider_get_credits.AI工具可用 AI订阅. - 可靠性 --通过指纹识别和代理轮换来绕过反机器人。浏览器舰队，可在Chrome、Firefox等浏览器上自动回退。内置重试和隐形升级功能。
快速开始
克劳德代码
claude mcp add spider -- npx -y spider-cloud-mcp设置API密钥：
export SPIDER_API_KEY="your-api-key"克劳德桌面
增添 claude_desktop_config.json:
{
"mcpServers": {
"spider": {
"command": "npx",
"args": ["-y", "spider-cloud-mcp"],
"env": {
"SPIDER_API_KEY": "your-api-key"
}
}
}
}光标
增添 .cursor/mcp.json:
{
"mcpServers": {
"spider": {
"command": "npx",
"args": ["-y", "spider-cloud-mcp"],
"env": {
"SPIDER_API_KEY": "your-api-key"
}
}
}
}帆板运动
增添 ~/.codeium/windsurf/mcp_config.json:
{
"mcpServers": {
"spider": {
"command": "npx",
"args": ["-y", "spider-cloud-mcp"],
"env": {
"SPIDER_API_KEY": "your-api-key"
}
}
}
}配置
| 变量 | 必填 | 描述 |
|---|---|---|
SPIDER_API_KEY | 是 | 您的Spider API密钥。得到一个在 蜘蛛云/蜘蛛眼 |
工具
核心工具（8）
这些服务基于按使用付费信用额度，无需订阅。
| 工具 | 说明 |
|---|---|
spider_crawl | 抓取网站并从多个页面中提取内容。跟随链接到深度/限制。 |
spider_scrape | 删掉一页。比需要一个URL时爬行更快、更便宜 |
spider_search | 搜索网络。可选择从结果中获取整页内容。 |
spider_links | 从页面中提取所有链接，而不获取内容。 |
spider_screenshot | 以base64 PNG格式捕获页面截图。 |
spider_unblocker | 通过高级反机器人旁路访问受机器人保护的内容。 |
spider_transform | 无需发出网络请求，即可将HTML转换为markdown或文本。 |
spider_get_credits | 检查您的API信用余额。 |
人工智能工具（5）
自然语言网络交互。用简单的英语描述你想要什么。
需要一个 AI订阅.
| 工具 | 说明 |
|---|---|
spider_ai_crawl | AI引导的爬行——描述要查找的内容。 |
spider_ai_scrape | 用简单的英语提取结构化数据——没有CSS选择器。 |
spider_ai_search | 人工智能通过意图理解增强了搜索。 |
spider_ai_browser | 使用自然语言自动执行浏览器操作。 |
spider_ai_links | 按描述查找和过滤链接。 |
浏览器自动化工具（9）
通过蜘蛛浏览器直接控制浏览器。浏览器在Spider的云中运行，具有智能重试、浏览器切换、反机器人保护、代理轮换和自动隐形升级功能。支持CDP和BiDi协议。
| 工具 | 说明 |
|---|---|
spider_browser_open | 打开远程浏览器会话。返回session_id |
spider_browser_navigate | 导航到URL并等待加载。 |
spider_browser_click | 通过CSS选择器单击元素。 |
spider_browser_fill | 用文本填充表单字段。 |
spider_browser_screenshot | 截取当前页面的屏幕截图。返回base64 PNG。 |
spider_browser_content | 获取页面HTML或可见文本。 |
spider_browser_evaluate | 在页面上下文中执行JavaScript。 |
spider_browser_wait_for | 等待元素、导航或网络空闲。 |
spider_browser_close | 关闭会话并停止计费。 |
浏览器会话在5分钟不活动后自动关闭。总是打电话 spider_browser_close 当完成时。
例子
研究与RAG
“抓取React文档并总结挂钩API”
用途 spider_crawl 在几秒钟内获取50多个页面，并返回干净的markdown以准备上下文。
spider_crawl: {
url: "https://react.dev/reference/react",
limit: 50,
return_format: "markdown",
filter_output_main_only: true
}结构化数据抽取
“从此电子商务页面获取所有产品名称和价格”
用途 spider_ai_scrape 使用零CSS选择器提取结构化JSON。
spider_ai_scrape: {
url: "https://example-store.com/products",
prompt: "Extract every product name, price, and availability status as JSON"
}多步浏览器自动化
“登录仪表板，转到报告，并截图月度摘要”
用途 spider_browser_* 用于驱动具有完全反bot保护的远程浏览器的工具。
1. spider_browser_open: { browser: "auto" }
2. spider_browser_navigate: { url: "https://app.example.com/login" }
3. spider_browser_fill: { selector: "input[name='email']", value: "user@example.com" }
4. spider_browser_fill: { selector: "input[name='password']", value: "..." }
5. spider_browser_click: { selector: "button[type='submit']" }
6. spider_browser_wait_for: { navigation: true }
7. spider_browser_navigate: { url: "https://app.example.com/reports/monthly" }
8. spider_browser_screenshot: {}
9. spider_browser_close: {}竞争情报
“搜索最近的人工智能创业融资轮次并获取详细信息”
用途 spider_search 通过时间过滤，然后 spider_scrape 了解详情。
spider_search: {
search: "AI startup Series A funding 2025",
num: 10,
fetch_page_content: true,
return_format: "markdown",
tbs: "qdr:m"
}API 参考
所有工具都直接映射到 蜘蛛API.核心工具接受与API对应工具相同的参数：
- 爬行/刮擦:
url,return_format,request,readability,root_selector,proxy_enabled,cache，以及 更多 - 搜索:
search,num,fetch_page_content,country,language,tbs - AI工具：添加a
prompt用自然语言描述你想要什么的参数 - 浏览器工具：使用
session_id从spider_browser_open对于所有操作
完整参数参考： spider.cloud/docs/api
链接
许可证
麻省理工学院