MCP 服务器

Skrape MCP Server

这个服务器可以将网页转换为干净、结构化的 Markdown 格式，并针对语言模型的使用进行优化。它会移除不必要的内容，并支持 JavaScript 渲染。

Tools

get_markdown

Get markdown content from a webpage using skrape.ai

README

Skrape MCP 服务器

使用 skrape.ai 将任何网页转换为干净的、LLM 就绪的 Markdown。非常适合将 Web 内容输入到 LLM 中。

此 MCP 服务器提供了一个简单的接口，可以使用 skrape.ai API 将网页转换为结构化的、干净的 Markdown 格式。它旨在与 Claude Desktop、其他 LLM 和 MCP 兼容的应用程序无缝协作。

为什么使用 Skrape 进行 LLM 集成？

干净、结构化的输出：生成格式良好的 Markdown，非常适合 LLM 使用
减少噪音：自动删除广告、导航菜单和其他不相关的内容
一致的格式：确保 Web 内容的结构统一，无论来源如何
JavaScript 支持：通过在转换之前渲染 JavaScript 来处理动态内容
LLM 优化：非常适合将 Web 内容输入到 Claude、GPT 和其他 LLM 模型等 LLM 中

特性

工具

get_markdown - 将任何网页转换为 LLM 就绪的 Markdown
- 接受任何输入 URL 和可选参数
- 返回干净、结构化的 Markdown，针对 LLM 使用进行了优化
- 支持 JavaScript 渲染以处理动态内容
- 可选的 JSON 响应格式，用于高级集成

安装

通过 Smithery 安装

要通过 Smithery 为 Claude Desktop 自动安装 Skrape MCP 服务器：

npx -y @smithery/cli install @skrapeai/skrape-mcp --client claude

手动安装

从 skrape.ai 获取您的 API 密钥
安装依赖项：

npm install

构建服务器：

npm run build

将服务器配置添加到 Claude Desktop：

在 MacOS 上：

nano ~/Library/Application\ Support/Claude/claude_desktop_config.json

在 Windows 上：

notepad %APPDATA%/Claude/claude_desktop_config.json

添加此配置（将路径和 API 密钥替换为您自己的值）：

{
  "mcpServers": {
    "skrape": {
      "command": "node",
      "args": ["path/to/skrape-mcp/build/index.js"],
      "env": {
        "SKRAPE_API_KEY": "your-key-here"
      },
    }
  }
}

与 LLM 一起使用

以下是如何将服务器与 Claude 或其他 LLM 模型一起使用：

首先，确保服务器已在您的 LLM 应用程序中正确配置
然后，您可以要求 ALLMI 获取和处理任何网页：

将此网页转换为 markdown：https://example.com

Claude 将使用如下 MCP 工具：
<use_mcp_tool>
<server_name>skrape</server_name>
<tool_name>get_markdown</tool_name>
<arguments>
{
  "url": "https://example.com",
  "options": {
    "renderJs": true
  }
}
</arguments>
</use_mcp_tool>

生成的 Markdown 将是干净、结构化的，并且可以立即进行 LLM 处理。

高级选项

get_markdown 工具接受以下参数：

url（必需）：要转换的任何网页 URL
returnJson（可选）：设置为 true 以获取完整的 JSON 响应，而不仅仅是 markdown
options（可选）：其他抓取选项
- renderJs：是否在抓取之前渲染 JavaScript（默认值：true）

包含所有选项的示例：

<use_mcp_tool>
<server_name>skrape</server_name>
<tool_name>get_markdown</tool_name>
<arguments>
{
  "url": "https://example.com",
  "returnJson": true,
  "options": {
    "renderJs": false
  }
}
</arguments>
</use_mcp_tool>