Website Downloader
W

Website Downloader

一个基于wget的网站下载MCP服务工具
2.5分
6.6K

什么是网站下载器MCP服务器?

网站下载器MCP服务器是一款基于MCP协议的工具,它可以帮助您快速下载整个网站并将其保存到本地。此工具支持递归下载、自动修复链接以及优化文件结构,非常适合备份或离线浏览。

如何使用网站下载器MCP服务器?

只需提供目标网站的URL并设置输出目录,即可开始下载。支持指定下载深度以控制文件大小和复杂度。

适用场景

适合需要离线访问网页内容的用户,例如制作网站备份、分析竞争对手策略或教学演示。

主要功能

递归下载
支持无限层级的递归下载,确保获取完整网站内容。
本地链接转换
自动调整页面中的外部链接为本地路径,便于离线使用。
文件扩展名添加
根据文件类型自动为其添加合适的后缀名。
域名限制
仅允许下载同一域名下的资源,避免意外抓取其他站点。
结构保留
下载后的文件夹结构与原始网站一致,方便查找和管理。
优势
操作简单,无需复杂配置即可完成任务。
支持多种操作系统(macOS、Linux、Windows)。
高效且稳定,适用于大多数网站需求。
局限性
对于非常大的网站可能占用较多存储空间。
无法处理动态生成的内容(如JavaScript渲染)。

如何使用

安装Wget
在您的设备上安装Wget工具,具体安装方法取决于您的操作系统。
启动MCP服务器
确保MCP服务器已正确安装并运行。
配置MCP服务器
编辑MCP配置文件以添加网站下载器。
执行下载任务
调用网站下载器工具并输入目标URL和输出路径。

使用案例

下载示例网站
演示如何使用网站下载器下载一个示例网站。
限定深度下载
仅下载目标网站的首页及其直接关联页面。

常见问题

是否支持跨域资源下载?
下载失败怎么办?
下载速度慢怎么办?

相关资源

Wget官方文档
了解Wget的基本用法和高级选项。
MCP服务器官网
获取更多关于MCP协议的信息。

安装

复制以下命令到你的Client进行配置
注意:您的密钥属于敏感信息,请勿与任何人分享。

替代品

K
Klavis
Klavis AI是一个开源项目,提供在Slack、Discord和Web平台上简单易用的MCP(模型上下文协议)服务,包括报告生成、YouTube工具、文档转换等多种功能,支持非技术用户和开发者使用AI工作流。
TypeScript
8.2K
5分
M
MCP
微软官方MCP服务器,为AI助手提供最新微软技术文档的搜索和获取功能
10.0K
5分
A
Aderyn
Aderyn是一个开源的Solidity智能合约静态分析工具,由Rust编写,帮助开发者和安全研究人员发现Solidity代码中的漏洞。它支持Foundry和Hardhat项目,可生成多种格式报告,并提供VSCode扩展。
Rust
5.9K
5分
D
Devtools Debugger MCP
Node.js调试器MCP服务器,提供基于Chrome DevTools协议的完整调试功能,包括断点设置、单步执行、变量检查和表达式评估等
TypeScript
5.4K
4分
S
Scrapling
Scrapling是一个自适应网页抓取库,能自动学习网站变化并重新定位元素,支持多种抓取方式和AI集成,提供高性能解析和开发者友好体验。
Python
7.9K
5分
M
Mcpjungle
MCPJungle是一个自托管的MCP网关,用于集中管理和代理多个MCP服务器,为AI代理提供统一的工具访问接口。
Go
0
4.5分
C
Cipher
Cipher是一个专为编程AI代理设计的开源记忆层框架,通过MCP协议与各种IDE和AI编码助手集成,提供自动记忆生成、团队记忆共享和双系统记忆管理等核心功能。
TypeScript
0
5分
N
Nexus
Nexus是一个AI工具聚合网关,支持连接多个MCP服务器和LLM提供商,通过统一端点提供工具搜索、执行和模型路由功能,支持安全认证和速率限制。
Rust
0
4分
D
Duckduckgo MCP Server
已认证
DuckDuckGo搜索MCP服务器,为Claude等LLM提供网页搜索和内容抓取服务
Python
57.0K
4.3分
F
Figma Context MCP
Framelink Figma MCP Server是一个为AI编程工具(如Cursor)提供Figma设计数据访问的服务器,通过简化Figma API响应,帮助AI更准确地实现设计到代码的一键转换。
TypeScript
55.9K
4.5分
F
Firecrawl MCP Server
Firecrawl MCP Server是一个集成Firecrawl网页抓取能力的模型上下文协议服务器,提供丰富的网页抓取、搜索和内容提取功能。
TypeScript
96.6K
5分
E
Exa Web Search
已认证
Exa MCP Server是一个为AI助手(如Claude)提供网络搜索功能的服务器,通过Exa AI搜索API实现实时、安全的网络信息获取。
TypeScript
40.2K
5分
B
Baidu Map
已认证
百度地图MCP Server是国内首个兼容MCP协议的地图服务,提供地理编码、路线规划等10个标准化API接口,支持Python和Typescript快速接入,赋能智能体实现地图相关功能。
Python
39.0K
4.5分
E
Edgeone Pages MCP Server
EdgeOne Pages MCP是一个通过MCP协议快速部署HTML内容到EdgeOne Pages并获取公开URL的服务
TypeScript
25.5K
4.8分
C
Context7
Context7 MCP是一个为AI编程助手提供实时、版本特定文档和代码示例的服务,通过Model Context Protocol直接集成到提示中,解决LLM使用过时信息的问题。
TypeScript
72.8K
4.7分
M
Minimax MCP Server
MiniMax Model Context Protocol (MCP) 是一个官方服务器,支持与强大的文本转语音、视频/图像生成API交互,适用于多种客户端工具如Claude Desktop、Cursor等。
Python
46.6K
4.8分
AIBase
智启未来,您的人工智能解决方案智库