Airflow MCP
A

Airflow MCP

一个与Apache Airflow集成的MCP服务器,提供DAG管理、监控和操作功能
2分
6.5K

什么是Airflow MCP服务器?

Airflow MCP服务器是一个中间件服务,它通过标准化的Model Context Protocol协议与Apache Airflow工作流平台集成。该服务允许用户通过简单的API调用来管理Airflow中的DAG(有向无环图)工作流,包括触发运行、监控状态、获取日志等操作。

如何使用Airflow MCP服务器?

使用Airflow MCP服务器需要先配置好Airflow环境,然后在MCP配置文件中添加Airflow MCP服务器的配置项。配置完成后,可以通过发送标准MCP协议请求来管理Airflow工作流。

适用场景

适用于需要集中管理多个Airflow实例的场景,或者需要将Airflow集成到现有自动化系统中的情况。特别适合数据工程团队和DevOps团队使用。

主要功能

触发DAG运行
通过指定DAG ID来触发一个新的DAG运行实例
启用DAG
启用指定的DAG,使其可以按计划运行
获取每日报告
获取指定时间范围内所有DAG运行的汇总报告
列出所有DAG
获取当前Airflow实例中所有可用的DAG列表
批量获取DAG运行记录
批量获取指定DAG的历史运行记录
获取DAG运行状态
获取特定DAG运行的当前状态(运行中/成功/失败等)
获取DAG日志
获取指定DAG运行的详细日志信息
回填DAG
对指定日期范围内的数据进行回填处理
优势
提供统一的API接口管理Airflow工作流
简化了Airflow的日常运维操作
支持批量操作,提高管理效率
与MCP生态系统无缝集成
局限性
需要预先配置好Airflow环境
部分高级功能需要Airflow专业版支持
性能受限于Airflow API的响应速度

如何使用

准备Airflow环境
确保已安装并运行Airflow服务,API端点可访问
配置MCP服务器
在mcp_config.json中添加Airflow MCP服务器配置
启动MCP服务器
使用配置好的命令启动MCP服务器
发送MCP请求
通过HTTP请求或MCP客户端工具发送管理命令

使用案例

触发每日数据导入DAG
在数据到达后手动触发每日数据导入流程
检查ETL流程状态
在业务系统集成中检查关键ETL流程的运行状态
生成上周运行报告
每周一生成上周所有工作流的运行情况报告

常见问题

如何解决连接Airflow API失败的问题?
为什么某些DAG无法触发?
如何获取更详细的日志信息?
回填操作会影响正在运行的DAG吗?

相关资源

Apache Airflow官方文档
Apache Airflow的官方文档和API参考
MCP协议规范
Model Context Protocol的完整规范文档
Airflow MCP GitHub仓库
Airflow MCP服务器的源代码和问题跟踪
Airflow快速入门视频
Airflow基础使用的视频教程

安装

复制以下命令到你的Client进行配置
{
  "mcpServers": {
    "airflow": {
      "command": "uvx",
      "args": [
        "airflow-mcp"
      ],
      "env": {
        "AIRFLOW_API_BASE": "http://localhost:8000/api/v1",
        "AIRFLOW_USERNAME": "admin",
        "AIRFLOW_PASSWORD": "admin"
      }
    }
  }
}

{
  "mcpServers": {
    "airflow": {
      "command": "uv",
      "args": [
        "--directory",
        "/path/to/airflow-mcp",
        "run",
        "airflow_mcp.py"
      ],
      "env": {
        "AIRFLOW_API_BASE": "http://localhost:8000/api/v1",
        "AIRFLOW_USERNAME": "admin",
        "AIRFLOW_PASSWORD": "admin"
      }
    }
  }
}
注意:您的密钥属于敏感信息,请勿与任何人分享。

替代品

M
MCP
微软官方MCP服务器,为AI助手提供最新微软技术文档的搜索和获取功能
10.0K
5分
A
Aderyn
Aderyn是一个开源的Solidity智能合约静态分析工具,由Rust编写,帮助开发者和安全研究人员发现Solidity代码中的漏洞。它支持Foundry和Hardhat项目,可生成多种格式报告,并提供VSCode扩展。
Rust
5.9K
5分
D
Devtools Debugger MCP
Node.js调试器MCP服务器,提供基于Chrome DevTools协议的完整调试功能,包括断点设置、单步执行、变量检查和表达式评估等
TypeScript
6.4K
4分
S
Scrapling
Scrapling是一个自适应网页抓取库,能自动学习网站变化并重新定位元素,支持多种抓取方式和AI集成,提供高性能解析和开发者友好体验。
Python
8.9K
5分
M
Mcpjungle
MCPJungle是一个自托管的MCP网关,用于集中管理和代理多个MCP服务器,为AI代理提供统一的工具访问接口。
Go
0
4.5分
C
Cipher
Cipher是一个专为编程AI代理设计的开源记忆层框架,通过MCP协议与各种IDE和AI编码助手集成,提供自动记忆生成、团队记忆共享和双系统记忆管理等核心功能。
TypeScript
0
5分
N
Nexus
Nexus是一个AI工具聚合网关,支持连接多个MCP服务器和LLM提供商,通过统一端点提供工具搜索、执行和模型路由功能,支持安全认证和速率限制。
Rust
0
4分
S
Shadcn Ui MCP Server
一个为AI工作流提供shadcn/ui组件集成的MCP服务器,支持React、Svelte和Vue框架,包含组件源码、示例和元数据访问功能。
TypeScript
12.2K
5分
F
Figma Context MCP
Framelink Figma MCP Server是一个为AI编程工具(如Cursor)提供Figma设计数据访问的服务器,通过简化Figma API响应,帮助AI更准确地实现设计到代码的一键转换。
TypeScript
56.9K
4.5分
F
Firecrawl MCP Server
Firecrawl MCP Server是一个集成Firecrawl网页抓取能力的模型上下文协议服务器,提供丰富的网页抓取、搜索和内容提取功能。
TypeScript
96.7K
5分
D
Duckduckgo MCP Server
已认证
DuckDuckGo搜索MCP服务器,为Claude等LLM提供网页搜索和内容抓取服务
Python
57.2K
4.3分
E
Exa Web Search
已认证
Exa MCP Server是一个为AI助手(如Claude)提供网络搜索功能的服务器,通过Exa AI搜索API实现实时、安全的网络信息获取。
TypeScript
40.2K
5分
E
Edgeone Pages MCP Server
EdgeOne Pages MCP是一个通过MCP协议快速部署HTML内容到EdgeOne Pages并获取公开URL的服务
TypeScript
25.5K
4.8分
M
Minimax MCP Server
MiniMax Model Context Protocol (MCP) 是一个官方服务器,支持与强大的文本转语音、视频/图像生成API交互,适用于多种客户端工具如Claude Desktop、Cursor等。
Python
46.6K
4.8分
B
Baidu Map
已认证
百度地图MCP Server是国内首个兼容MCP协议的地图服务,提供地理编码、路线规划等10个标准化API接口,支持Python和Typescript快速接入,赋能智能体实现地图相关功能。
Python
39.0K
4.5分
C
Context7
Context7 MCP是一个为AI编程助手提供实时、版本特定文档和代码示例的服务,通过Model Context Protocol直接集成到提示中,解决LLM使用过时信息的问题。
TypeScript
72.2K
4.7分
AIBase
智启未来,您的人工智能解决方案智库