Scrappey MCP Server

Scrappey MCP Server

一个服务器,用于连接人工智能模型和 Scrappey 的网络自动化平台,允许创建浏览器会话、执行 HTTP 请求以及自动化浏览器操作,同时处理反爬虫保护。

Category
访问服务器

README

Scrappey MCP 服务器

一个用于与 Scrappey.com 的 Web 自动化和抓取功能交互的模型上下文协议 (MCP) 服务器。可以直接在 smithery.ai/server/@pim97/mcp-server-scrappey 试用。

概述

此 MCP 服务器提供了一个 AI 模型和 Scrappey Web 自动化平台之间的桥梁,允许您:

  • 创建和管理浏览器会话
  • 通过 Scrappey 的基础设施发送 HTTP 请求
  • 执行浏览器操作(点击、输入、滚动等)
  • 自动处理各种反爬虫保护

设置

  1. Scrappey.com 获取您的 Scrappey API 密钥
  2. 设置您的环境变量:
SCRAPPEY_API_KEY=your_api_key_here

可用工具

1. 创建会话 (scrappey_create_session)

创建一个新的浏览器会话,该会话会持久保存 cookie 和其他状态。

{
  "proxy": "http://user:pass@ip:port"  // 可选:自定义代理,留空则使用默认代理
}

2. 销毁会话 (scrappey_destroy_session)

正确关闭浏览器会话。

{
  "session": "session_id_here"  // 必需:要销毁的会话 ID
}

3. 发送请求 (scrappey_request)

通过 Scrappey 基础设施发送 HTTP 请求。

{
  "cmd": "request.get",  // 必需:request.get, request.post 等
  "url": "https://example.com",  // 必需:目标 URL
  "session": "session_id_here",  // 必需:要使用的会话 ID
  "postData": "key=value",  // 可选:POST 数据
  "customHeaders": {  // 可选:自定义标头
    "User-Agent": "custom-agent"
  }
}

4. 浏览器操作 (scrappey_browser_action)

执行浏览器自动化操作。

{
  "session": "session_id_here",  // 必需:要使用的会话 ID
  "browserActions": [  // 必需:要执行的操作数组
    {
      "type": "click",  // 操作类型:click, hover, type, scroll, wait
      "cssSelector": ".button",  // 元素的 CSS 选择器
      "text": "Hello",  // 要输入的文本(对于 type 操作)
      "wait": 1000  // 等待时间,单位为毫秒
    }
  ]
}

典型工作流程

  1. 创建一个会话:
{
  "name": "scrappey_create_session"
}
  1. 将返回的会话 ID 用于后续请求:
{
  "name": "scrappey_request",
  "cmd": "request.get",
  "url": "https://example.com",
  "session": "returned_session_id"
}
  1. 如果需要,执行浏览器操作:
{
  "name": "scrappey_browser_action",
  "session": "returned_session_id",
  "browserActions": [
    {
      "type": "click",
      "cssSelector": "#login-button"
    },
    {
      "type": "type",
      "cssSelector": "#username",
      "text": "myuser"
    }
  ]
}
  1. 完成后,通过销毁会话进行清理:
{
  "name": "scrappey_destroy_session",
  "session": "returned_session_id"
}

特性

  • 会话持久性,用于维护状态
  • 自动反爬虫保护处理
  • 支持自定义代理
  • 浏览器自动化功能
  • HTTP 请求方法(GET、POST、PUT、DELETE、PATCH)
  • 自定义标头和 cookie 支持

最佳实践

  1. 完成会话后始终销毁会话
  2. 向同一站点发出多个请求时,重用会话
  3. 在操作之间使用适当的等待时间,以获得更像人类的行为
  4. 在使用会话之前检查会话是否存在

错误处理

如果出现问题,服务器将返回包含详细信息的错误消息。 常见错误包括:

  • 无效的会话 ID
  • 网络超时
  • 浏览器操作的无效选择器
  • 反爬虫保护失败

资源

许可证

MIT 许可证

推荐服务器

Baidu Map

Baidu Map

百度地图核心API现已全面兼容MCP协议,是国内首家兼容MCP协议的地图服务商。

官方
精选
JavaScript
Playwright MCP Server

Playwright MCP Server

一个模型上下文协议服务器,它使大型语言模型能够通过结构化的可访问性快照与网页进行交互,而无需视觉模型或屏幕截图。

官方
精选
TypeScript
Magic Component Platform (MCP)

Magic Component Platform (MCP)

一个由人工智能驱动的工具,可以从自然语言描述生成现代化的用户界面组件,并与流行的集成开发环境(IDE)集成,从而简化用户界面开发流程。

官方
精选
本地
TypeScript
Audiense Insights MCP Server

Audiense Insights MCP Server

通过模型上下文协议启用与 Audiense Insights 账户的交互,从而促进营销洞察和受众数据的提取和分析,包括人口统计信息、行为和影响者互动。

官方
精选
本地
TypeScript
VeyraX

VeyraX

一个单一的 MCP 工具,连接你所有喜爱的工具:Gmail、日历以及其他 40 多个工具。

官方
精选
本地
graphlit-mcp-server

graphlit-mcp-server

模型上下文协议 (MCP) 服务器实现了 MCP 客户端与 Graphlit 服务之间的集成。 除了网络爬取之外,还可以将任何内容(从 Slack 到 Gmail 再到播客订阅源)导入到 Graphlit 项目中,然后从 MCP 客户端检索相关内容。

官方
精选
TypeScript
Kagi MCP Server

Kagi MCP Server

一个 MCP 服务器,集成了 Kagi 搜索功能和 Claude AI,使 Claude 能够在回答需要最新信息的问题时执行实时网络搜索。

官方
精选
Python
e2b-mcp-server

e2b-mcp-server

使用 MCP 通过 e2b 运行代码。

官方
精选
Neon MCP Server

Neon MCP Server

用于与 Neon 管理 API 和数据库交互的 MCP 服务器

官方
精选
Exa MCP Server

Exa MCP Server

模型上下文协议(MCP)服务器允许像 Claude 这样的 AI 助手使用 Exa AI 搜索 API 进行网络搜索。这种设置允许 AI 模型以安全和受控的方式获取实时的网络信息。

官方
精选