MCP Web Server

MCP Web Server

A local MCP server providing free network access capabilities including HTTP requests, web search, webpage content extraction, and optional screenshots, designed for integration with Claude Desktop or Claude Code.

Category
访问服务器

README

MCP Web Server

本项目是一个本地 MCP Server,提供免费网络访问能力,可接入 Claude Desktop / Claude Code 等 MCP 客户端。

功能概览

  • http_request: 通用 HTTP 请求
  • web_search: 可配置搜索引擎(DuckDuckGo / Bing / 百度)
  • extract_webpage_content: 网页正文提取(含标题、列表、表格、代码块、引用)
  • fetch_json: 获取并解析 JSON
  • web_search_and_extract: 搜索 + 并发提取一体化
  • batch_http_request: 批量并发请求
  • screenshot_webpage(可选): 网页截图并返回 Base64(需安装 Playwright)

安装

uv pip install -e .

开发依赖:

uv pip install -e ".[dev]"

启动服务

uv run python run_server.py

MCP 配置

Claude Code

claude mcp add web-server -s local -- uv run --directory /path/to/your/project python run_server.py

Claude Desktop

请参考仓库中的示例配置文件:claude_desktop_config.example.json。

使用前将 --directory 路径改为你的本地项目路径。

运行测试

uv pip install -e ".[dev]"
pytest

环境变量

变量名 说明 默认值
MCP_LOG_LEVEL 日志级别 INFO
MCP_HTTP_PROXY HTTP 代理 空
MCP_HTTPS_PROXY HTTPS 代理 空
MCP_USER_AGENT 自定义 User-Agent 内置 UA
MCP_DEFAULT_TIMEOUT 默认请求超时(秒) 30
MCP_SEARCH_ENGINE 搜索引擎:duckduckgo/bing/baidu duckduckgo
MCP_BING_DOMAIN Bing 检索域名(可设 www.bing.com/cn.bing.com) www.bing.com
MCP_SEARCH_API_KEY 可选搜索 API Key(预留扩展) 空
MCP_SEARCH_API_ENDPOINT 可选搜索 API Endpoint(预留扩展) 空
MCP_RATE_LIMIT_SEARCH web_search 每分钟调用上限 5
MCP_RATE_LIMIT_HTTP http_request 每分钟调用上限 30
MCP_RATE_LIMIT_EXTRACT extract_webpage_content 每分钟调用上限 10
MCP_STDIN_INVALID_INPUT_POLICY 非法 stdin 行处理策略:ignore/warn/strict warn

MCP_STDIN_INVALID_INPUT_POLICY 说明:

  • warn(默认):忽略非法 JSON-RPC 行并记录 warning
  • ignore:忽略非法 JSON-RPC 行且不记录 warning
  • strict:收到非法 JSON-RPC 行即快速失败(便于定位客户端写入问题)

MCP_SEARCH_ENGINE 说明:

  • duckduckgo:默认选项,无 API Key;在部分网络环境下可能不可用。
  • bing:默认使用 www.bing.com 页面检索;可通过 MCP_BING_DOMAIN=cn.bing.com 切换大陆入口。
  • baidu:使用百度网页检索;中国大陆可用性通常较好。

可选 API Key 模式说明:

  • 当前版本默认使用“网页检索”模式(无需 API Key)。
  • MCP_SEARCH_API_KEY / MCP_SEARCH_API_ENDPOINT 已预留,便于后续接入官方 API 或第三方聚合 API。

可选截图依赖

uv pip install -e ".[screenshot]"
playwright install chromium

可选 Web 配置界面

项目内提供了一个基于 Flask 的辅助配置界面(web_config.py / run_web_config.py),用于通过浏览器引导执行 claude mcp add:

uv pip install -e ".[web]"
uv run python run_web_config.py

打开 http://localhost:5000 即可使用。
如果你只通过命令行配置 MCP,可忽略这两个文件。

架构图

flowchart TD
    Client[MCP Client] --> Server[FastMCP Server]
    Server --> Tools[Tools Layer]
    Tools --> Search[web_search / web_search_and_extract]
    Tools --> Http[http_request / batch_http_request / fetch_json]
    Tools --> Extract[extract_webpage_content]
    Tools --> Shot[screenshot_webpage optional]
    Http --> AsyncClient[Shared httpx.AsyncClient]
    Extract --> AsyncClient
    Search --> DDGS[DuckDuckGo via asyncio.to_thread]
    Search --> Bing[Bing HTML parsing]
    Search --> Baidu[Baidu HTML parsing + redirect resolve]

版本记录

详见 CHANGELOG.md。

许可证

本项目采用 Apache License 2.0 许可证。

Copyright 2025 MCP Web Server Contributors

Licensed under the Apache License, Version 2.0 (the "License");
you may not use this file except in compliance with the License.
You may obtain a copy of the License at

    http://www.apache.org/licenses/LICENSE-2.0

Unless required by applicable law or agreed to in writing, software
distributed under the License is distributed on an "AS IS" BASIS,
WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
See the License for the specific language governing permissions and
limitations under the License.

推荐服务器

Baidu Map

Baidu Map

百度地图核心API现已全面兼容MCP协议,是国内首家兼容MCP协议的地图服务商。

官方
精选
JavaScript
Playwright MCP Server

Playwright MCP Server

一个模型上下文协议服务器,它使大型语言模型能够通过结构化的可访问性快照与网页进行交互,而无需视觉模型或屏幕截图。

官方
精选
TypeScript
Magic Component Platform (MCP)

Magic Component Platform (MCP)

一个由人工智能驱动的工具,可以从自然语言描述生成现代化的用户界面组件,并与流行的集成开发环境(IDE)集成,从而简化用户界面开发流程。

官方
精选
本地
TypeScript
Audiense Insights MCP Server

Audiense Insights MCP Server

通过模型上下文协议启用与 Audiense Insights 账户的交互,从而促进营销洞察和受众数据的提取和分析,包括人口统计信息、行为和影响者互动。

官方
精选
本地
TypeScript
VeyraX

VeyraX

一个单一的 MCP 工具,连接你所有喜爱的工具:Gmail、日历以及其他 40 多个工具。

官方
精选
本地
graphlit-mcp-server

graphlit-mcp-server

模型上下文协议 (MCP) 服务器实现了 MCP 客户端与 Graphlit 服务之间的集成。 除了网络爬取之外,还可以将任何内容(从 Slack 到 Gmail 再到播客订阅源)导入到 Graphlit 项目中,然后从 MCP 客户端检索相关内容。

官方
精选
TypeScript
Kagi MCP Server

Kagi MCP Server

一个 MCP 服务器,集成了 Kagi 搜索功能和 Claude AI,使 Claude 能够在回答需要最新信息的问题时执行实时网络搜索。

官方
精选
Python
e2b-mcp-server

e2b-mcp-server

使用 MCP 通过 e2b 运行代码。

官方
精选
Neon MCP Server

Neon MCP Server

用于与 Neon 管理 API 和数据库交互的 MCP 服务器

官方
精选
Exa MCP Server

Exa MCP Server

模型上下文协议(MCP)服务器允许像 Claude 这样的 AI 助手使用 Exa AI 搜索 API 进行网络搜索。这种设置允许 AI 模型以安全和受控的方式获取实时的网络信息。

官方
精选