Scrapi MCP Server
S

Scrapi MCP Server

Scrapi AI的MCP服务器可将网页URL转换为干净的Markdown/文本格式,供AI代理读取和分析网页内容,支持JavaScript渲染和批量处理。
2.5分
3.7K

什么是Scrapi MCP Server?

Scrapi MCP Server是一个基于Model Context Protocol(MCP)的服务器,专门为AI助手(如Claude、Cursor等)提供网页内容读取能力。它能够将任何网页URL转换为干净、结构化的Markdown或纯文本格式,移除广告、导航栏和脚本等干扰元素,让AI能够直接理解和处理网页内容。

如何使用Scrapi MCP Server?

使用Scrapi MCP Server非常简单:1) 注册Scrapi账户获取API密钥;2) 在您的AI客户端(Claude Desktop、Cursor等)中配置MCP服务器;3) 重启客户端即可使用。配置完成后,AI助手可以直接调用网页抓取功能,无需您手动复制粘贴内容。

适用场景

Scrapi MCP Server特别适合以下场景:新闻文章摘要、技术文档阅读、产品价格比较、竞品分析、研究报告整理、API文档查询、博客内容提取等任何需要AI处理网页信息的场景。

主要功能

网页内容提取
将网页URL转换为干净的Markdown或纯文本格式,保留标题、列表、链接等关键结构,移除无关元素。
JavaScript渲染支持
支持处理单页应用(SPA)和动态加载的内容,确保获取完整的网页内容。
元数据提取
自动提取网页标题、作者、发布日期、图片等元数据,提供更丰富的上下文信息。
批量处理
支持同时处理多个URL(最多10个),提高处理效率,适合研究和比较场景。
双传输模式
支持Stdio(本地运行)和Streamable HTTP(远程连接)两种传输模式,适应不同部署需求。
使用量监控
内置使用量统计和账单管理功能,实时查看剩余额度、订阅信息和每日使用情况。
优势
⚡ 快速可靠:基于8年网页抓取经验,1900+生产级爬虫,处理速度快
🧹 内容纯净:自动过滤广告、导航栏、脚本等干扰内容
🌐 广泛兼容:支持JavaScript渲染的现代网页和单页应用
🔧 易于集成:支持主流AI客户端(Claude Desktop、Cursor、Cline等)
💳 免费额度:每月提供500次免费调用额度
🔄 自动重试:遇到限流时自动重试,提高成功率
局限性
📊 额度限制:免费版每月500次调用,超出需要升级套餐
🔒 登录限制:无法处理需要登录的网页内容
⏱️ 响应时间:复杂网页可能需要几秒钟处理时间
📱 移动端:专门针对桌面端网页优化,移动端适配可能不完美

如何使用

获取API密钥
访问Scrapi官网注册账户,在控制台中获取您的MCP API密钥(以hsmcp_开头)。
配置AI客户端
根据您使用的AI客户端,编辑相应的配置文件,添加Scrapi MCP服务器配置。
重启客户端
完全退出并重新启动您的AI客户端,确保配置生效。
开始使用
配置完成后,您的AI助手就可以直接读取网页内容了。

使用案例

新闻文章摘要
让AI助手快速阅读并总结长篇新闻文章的核心内容。
产品价格比较
在不同电商网站间比较产品价格和规格。
技术文档查询
让AI阅读API文档并生成示例代码。
竞品分析
快速了解竞争对手的产品功能和定价策略。

常见问题

Scrapi MCP Server是免费的吗?
支持哪些AI客户端?
需要安装Node.js吗?
如何处理需要登录的网页?
抓取速度如何?
如何查看使用量?
遇到"API key is required"错误怎么办?
支持中文网页吗?

相关资源

Scrapi官方网站
注册账户、查看套餐、管理API密钥
MCP协议文档
了解Model Context Protocol的技术细节
GitHub仓库
查看源代码、提交问题、参与贡献
Claude Desktop配置指南
官方Claude Desktop使用和配置文档
技术支持邮箱
获取技术支持和问题解答

安装

复制以下命令到你的Client进行配置
{
  "mcpServers": {
    "scrapi": {
      "command": "npx",
      "args": ["-y", "@scrapi.ai/mcp-server"],
      "env": {
        "SCRAPI_API_KEY": "your-api-key"
      }
    }
  }
}

{
  "mcpServers": {
    "scrapi": {
      "command": "node",
      "args": ["/absolute/path/to/scrapi-mcp-server/dist/index.js"],
      "env": {
        "SCRAPI_API_KEY": "your-api-key"
      }
    }
  }
}

{
  "mcpServers": {
    "scrapi": {
      "command": "npx",
      "args": ["-y", "@scrapi.ai/mcp-server", "--api-key", "your-api-key"]
    }
  }
}

{
  "mcpServers": {
    "scrapi": {
      "url": "https://scrapi.ai/mcp",
      "headers": {
        "Authorization": "Bearer your-api-key"
      }
    }
  }
}

{
  "mcpServers": {
    "scrapi": {
      "type": "streamableHttp",
      "url": "https://scrapi.ai/mcp",
      "headers": {
        "Authorization": "Bearer your-api-key"
      }
    }
  }
}

{
  "mcpServers": {
    "scrapi": {
      "command": "npx",
      "args": [
        "mcp-remote",
        "https://scrapi.ai/mcp",
        "--header",
        "Authorization: Bearer your-api-key"
      ]
    }
  }
}
注意:您的密钥属于敏感信息,请勿与任何人分享。

替代品

V
Vestige
Vestige是一个基于认知科学的AI记忆引擎,通过实现预测误差门控、FSRS-6间隔重复、记忆梦境等29个神经科学模块,为AI提供长期记忆能力。包含3D可视化仪表板和21个MCP工具,完全本地运行,无需云端。
Rust
4.5K
4.5分
M
Moltbrain
MoltBrain是一个为OpenClaw、MoltBook和Claude Code设计的长期记忆层插件,能够自动学习和回忆项目上下文,提供智能搜索、观察记录、分析统计和持久化存储功能。
TypeScript
4.1K
4.5分
B
Bm.md
一个功能丰富的Markdown排版工具,支持多种样式主题和平台适配,提供实时编辑预览、图片导出和API集成能力
TypeScript
4.4K
5分
S
Security Detections MCP
Security Detections MCP 是一个基于Model Context Protocol的服务器,允许LLM查询统一的安全检测规则数据库,涵盖Sigma、Splunk ESCU、Elastic和KQL格式。最新3.0版本升级为自主检测工程平台,可自动从威胁情报中提取TTPs、分析覆盖差距、生成SIEM原生格式检测规则、运行测试并验证。项目包含71+工具、11个预构建工作流提示和知识图谱系统,支持多SIEM平台。
TypeScript
6.0K
4分
P
Paperbanana
PaperBanana是一个自动化生成学术图表和统计图的智能框架,支持从文本描述生成高质量的论文插图,采用多智能体管道和迭代优化,提供CLI、Python API和MCP服务器等多种使用方式。
Python
6.6K
5分
F
Finlab Ai
FinLab AI是一个金融量化分析平台,通过AI技术帮助用户发现投资策略中的超额收益(alpha)。它提供丰富的数据集、回测框架和策略示例,支持自动化安装与集成到主流AI编程助手。
5.5K
4分
B
Better Icons
一个提供超过20万图标搜索和检索的MCP服务器和CLI工具,支持150多个图标库,帮助AI助手和开发者快速获取和使用图标。
TypeScript
6.7K
4.5分
A
Assistant Ui
assistant-ui是一个开源TypeScript/React库,用于快速构建生产级AI聊天界面,提供可组合的UI组件、流式响应、无障碍访问等功能,支持多种AI后端和模型。
TypeScript
7.3K
5分
F
Figma Context MCP
Framelink Figma MCP Server是一个为AI编程工具(如Cursor)提供Figma设计数据访问的服务器,通过简化Figma API响应,帮助AI更准确地实现设计到代码的一键转换。
TypeScript
74.4K
4.5分
D
Duckduckgo MCP Server
已认证
DuckDuckGo搜索MCP服务器,为Claude等LLM提供网页搜索和内容抓取服务
Python
85.7K
4.3分
F
Firecrawl MCP Server
Firecrawl MCP Server是一个集成Firecrawl网页抓取能力的模型上下文协议服务器,提供丰富的网页抓取、搜索和内容提取功能。
TypeScript
149.8K
5分
E
Edgeone Pages MCP Server
EdgeOne Pages MCP是一个通过MCP协议快速部署HTML内容到EdgeOne Pages并获取公开URL的服务
TypeScript
33.0K
4.8分
B
Baidu Map
已认证
百度地图MCP Server是国内首个兼容MCP协议的地图服务,提供地理编码、路线规划等10个标准化API接口,支持Python和Typescript快速接入,赋能智能体实现地图相关功能。
Python
50.1K
4.5分
E
Exa Web Search
已认证
Exa MCP Server是一个为AI助手(如Claude)提供网络搜索功能的服务器,通过Exa AI搜索API实现实时、安全的网络信息获取。
TypeScript
57.3K
5分
C
Context7
Context7 MCP是一个为AI编程助手提供实时、版本特定文档和代码示例的服务,通过Model Context Protocol直接集成到提示中,解决LLM使用过时信息的问题。
TypeScript
106.0K
4.7分
M
Minimax MCP Server
MiniMax Model Context Protocol (MCP) 是一个官方服务器,支持与强大的文本转语音、视频/图像生成API交互,适用于多种客户端工具如Claude Desktop、Cursor等。
Python
63.6K
4.8分
AIBase
智启未来,您的人工智能解决方案智库