Fetch MCP 服务器

此 MCP 服务器提供多种格式的网页内容抓取功能，包括 HTML、JSON、纯文本和 Markdown。

组件

工具

• fetch_html

  • 抓取一个网站并返回 HTML 内容
  • 输入:
    • url (字符串，必需): 要抓取的网站 URL
    • headers (对象，可选): 请求中包含的自定义头信息
  • 返回网页的原始 HTML 内容

• fetch_json

  • 从 URL 抓取 JSON 文件
  • 输入:
    • url (字符串，必需): 要抓取的 JSON 的 URL
    • headers (对象，可选): 请求中包含的自定义头信息
  • 返回解析后的 JSON 内容

• fetch_txt

  • 抓取一个网站并返回纯文本内容（无 HTML）
  • 输入:
    • url (字符串，必需): 要抓取的网站 URL
    • headers (对象，可选): 请求中包含的自定义头信息
  • 返回去除 HTML 标签、脚本和样式的网页文本内容

• fetch_markdown

  • 抓取一个网站并返回 Markdown 格式的内容
  • 输入:
    • url (字符串，必需): 要抓取的网站 URL
    • headers (对象，可选): 请求中包含的自定义头信息
  • 返回网页内容转换为 Markdown 格式的结果

资源

此服务器不提供任何持久资源。它设计为抓取和按需转换网页内容。

入门指南

1. 克隆仓库
2. 安装依赖: npm install
3. 构建服务器: npm run build

通过 Smithery 安装

要自动通过 Smithery 安装 fetch-mcp 以供 Claude Desktop 使用：

npx -y @smithery/cli install @goswamig/fetch-mcp --client claude

使用方法

要使用服务器，可以直接运行它:

npm start

这将启动 Fetch MCP Server 在 stdio 上运行。

与桌面应用程序集成使用

要在桌面应用中集成此服务器，请在应用的服务器配置中添加以下内容:

{
  "mcpServers": {
    "fetch": {
      "command": "node",
      "args": [
        "{ABSOLUTE PATH TO FILE HERE}/dist/index.js"
      ]
    }
  }
}

功能

• 使用现代 fetch API 抓取网页内容
• 支持自定义请求头
• 提供多种格式的内容: HTML、JSON、纯文本和 Markdown
• 使用 JSDOM 进行 HTML 解析和文本提取
• 使用 TurndownService 进行 HTML 转换为 Markdown

开发

• 运行 npm run dev 以启动 TypeScript 编译器的监视模式
• 使用 npm test 运行测试套件

许可证

此项目根据 MIT License 分发。