# 网页抓取

一个基于Firecrawl API的网站数据抓取和结构化提取服务

基于Node.js undici库的网页内容获取MCP服务

基于MCP协议的网页内容获取与处理工具

XFetch MCP Server是一个增强型网页内容获取服务，专为LLM设计，能够突破Cloudflare等安全防护，支持JavaScript渲染和精准内容提取，并提供Markdown转换功能。

一个提供网页内容抓取功能的MCP服务器，可将HTML转换为Markdown以便处理，支持分块读取内容。

Firecrawl MCP Server是一个集成Firecrawl网页抓取能力的模型上下文协议服务器，提供丰富的网页抓取、搜索和内容提取功能。

Oxylabs MCP服务器为AI助手提供网页数据抓取服务，支持动态渲染、结构化提取和反封锁功能。

一个提供网页内容抓取和格式转换的MCP服务器

一个基于FastMCP框架的现代MCP服务器，提供URL文本抓取、网页链接提取和Brave搜索功能，支持LM Studio等MCP兼容客户端。

这是一个基于FastMCP的异步文档检索服务器，提供AI/Python生态库官方文档的搜索、抓取和清理功能，支持uv、langchain、openai、llama-index等库的文档获取。

MCP数据获取服务器是一个安全、沙盒化的服务器，通过模型控制协议（MCP）获取网页内容并提取数据，不执行JavaScript。

Scrapi AI的MCP服务器可将网页URL转换为干净的Markdown/文本格式，供AI代理读取和分析网页内容，支持JavaScript渲染和批量处理。

Model Context Protocol (MCP) Server 是一个模块化的服务器，支持多种上下文感知任务，目前包括研究和网页抓取功能，适合需要自动化研究或实时数据提取的项目。

MCP服务器提供网页内容抓取功能，支持浏览器自动化、OCR和多方法内容提取，帮助LLM获取并处理需要JavaScript渲染或防爬取的网页内容。

Scraper.is MCP是一个基于模型上下文协议(MCP)的网页抓取工具集成包，允许AI助手通过MCP协议抓取网页内容，支持多种格式输出和实时进度更新。

WebScraping.AI MCP服务器是一个集成网络数据提取功能的协议服务实现，提供多种网页内容处理工具。

一个强大的MCP服务器，用于以多种格式（HTML、JSON、Markdown、纯文本）获取和转换网页内容。

一个基于crawl4ai库的MCP服务器，提供网页抓取和智能内容提取功能，支持AI代理通过自然语言指令与网页交互。

Hyperbrowser的MCP服务器提供网页抓取、结构化数据提取和浏览器代理工具。

Fetcher MCP是一个基于Playwright无头浏览器的网页内容抓取服务器，利用AI技术高效获取网页信息。

基于Playwright的浏览器自动化MCP服务器，提供网页抓取、测试和自动化工具

ScrAPI MCP服务器是一个基于ScrAPI技术的网页抓取服务，提供HTML和Markdown两种格式的网页内容提取功能，支持本地部署和云端访问。

Fetch MCP Server是一个基于Model Context Protocol（MCP）的实现，提供实时通信和网页内容抓取功能，支持服务器发送事件（SSE）和AI应用集成。

该项目展示如何利用Cloudflare浏览器渲染技术提取网页内容作为LLM上下文，包含API实验和MCP服务器实现。

Scraper.is MCP是一个基于Model Context Protocol的网页抓取工具集成包，使AI助手能够通过MCP协议访问最新的网页内容。

一个提供HTTP请求能力的MCP服务器，支持LLM获取和处理网页内容，包括内容转换、过滤和自定义请求等功能。

这是一个基于Model Context Protocol (MCP)的Playwright网页内容获取服务，提供网页导航、内容抓取、交互元素检测和鼠标操作模拟等功能。

一个功能全面的MCP协议服务器，提供网页抓取、数据分析、系统监控、文件操作、API集成和报告生成等高级功能，支持与Claude Desktop等MCP客户端无缝集成。

Scrapling是一个自适应网页抓取库，能自动学习网站变化并重新定位元素，支持多种抓取方式和AI集成，提供高性能解析和开发者友好体验。

Search Stack 是一个专为 AI Agent 设计的 Web 搜索与抓取中间层，提供统一的多引擎搜索、反爬渲染、Cookie 管理和正文提取 API，旨在解决 AI 在访问网页时遇到的额度限制、反爬拦截和登录态缺失等问题。