获取 MCP 服务器

此MCP服务器提供多种格式（包括HTML、JSON、纯文本和Markdown）的网页内容抓取功能。

组件

工具

• fetch_html

  • 抓取网站并返回HTML内容
  • 输入：
    • url (字符串，必填)：要抓取的网站URL
    • headers (对象，可选)：请求中包含的自定义头
  • 返回网页的原始HTML内容

• fetch_json

  • 从URL获取JSON文件
  • 输入：
    • url (字符串，必填)：要获取的JSON URL
    • headers (对象，可选)：请求中包含的自定义头
  • 返回解析后的JSON内容

• fetch_txt

  • 抓取网站并返回纯文本内容（无HTML）
  • 输入：
    • url (字符串，必填)：要抓取的网站URL
    • headers (对象，可选)：请求中包含的自定义头
  • 返回去除HTML标签、脚本和样式后的网页文本内容

• fetch_markdown

  • 抓取网站并返回Markdown格式的内容
  • 输入：
    • url (字符串，必填)：要抓取的网站URL
    • headers (对象，可选)：请求中包含的自定义头
  • 返回网页内容转换为Markdown格式的结果

资源

此服务器不提供任何持久资源。它是按需抓取和转换网络内容的设计。

入门指南

1. 克隆仓库
2. 安装依赖项：npm install
3. 构建服务器：npm run build

使用方法

要使用该服务器，可以直接运行：

npm start

这将启动在标准输入输出上运行的Fetch MCP Server。

与桌面应用程序结合使用

要将此服务器集成到桌面应用程序中，请将以下内容添加到应用程序的服务器配置中：

{
  "mcpServers": {
    "fetch": {
      "command": "node",
      "args": [
        "{ABSOLUTE PATH TO FILE HERE}/dist/index.js"
      ]
    }
  }
}

功能

• 使用现代 fetch API 抓取网络内容
• 支持自定义请求头
• 提供多种格式的内容：HTML、JSON、纯文本和Markdown
• 使用 JSDOM 进行 HTML 解析和文本提取
• 使用 TurndownService 进行 HTML 到 Markdown 转换

开发

• 运行 npm run dev 以启动 TypeScript 编译器的监视模式
• 使用 npm test 运行测试套件

许可证

此项目根据 MIT 许可证发布。