MCP网页抓取器
这是一个MCP服务器,它提供了一个抓取网页并提取其主要内容的工具。
特性
scrape_url:获取URL,删除杂乱(广告、导航等),并返回干净的文本内容。
安装
- 克隆仓库 或导航到该目录。
- 创建虚拟环境:
python3 -m venv .venv
source .venv/bin/activate- 安装依赖项:
pip install -r requirements.txt使用MCP桌面
要将此服务器与MCP Desktop一起使用,请将以下内容添加到您的 mcp_desktop_config.json:
{
"mcpServers": {
"web-scraper": {
"command": "/absolute/path/to/your/venv/bin/python",
"args": [
"/absolute/path/to/your/server.py"
]
}
}
}重要:替换 /absolute/path/to/your/... 使用系统上的实际绝对路径。
发展
要手动运行服务器(它使用stdio传输):
python server.py