Apache SeaTunnel MCP Server:让AI成为你的ETL助手

Apache SeaTunnel MCP Server,可以将 SeaTunnel 的接口文档提供给 Cursor 等支持 AI 编程的 IDE,或其他支持 MCP 的 AI 工具。

MCP Server(Model Context Protocol Server) 是一种基于MCP协议的服务器,旨在为大型语言模型(LLM)提供与外部数据源和工具的无缝集成。它通过标准化AI系统与数据源的交互方式,帮助模型获取更丰富的上下文信息,从而生成更准确、更相关的响应。‌

SeaTunnel MCP Server 是连接AI编程工具与SeaTunnel的智能桥梁,有了 SeaTunnel MCP Server,开发者就可以通过 AI 助手完成以下工作:根据跟用户交互实现RESTful API V2的接口调用,至于通过这个接口文档数据能让 AI 干什么更多更强大的活,请发挥你和你们团队的想象力😜。

举个栗子🙋‍♀️🌰
  • ⚡ 一键提交/监控数据作业
  • 🔍 智能解析运行日志
  • 📊 自动生成运维报告
  • 🤖 根据自然语言生成配置文件

🚀 五分钟极速体验

🎯 如何使用

完成相关配置后,Apache SeaTunnel MCP Server 会自动获取 2.3.9 接口文档的数据并缓存在本地,AI 助手可以通过 MCP 读取接口文档数据。

你只要告诉 AI 你想要做什么即可,示例:

hocon 复制代码
env {
  job.mode = "batch"
}
 
source {
  Jdbc {
        url = "jdbc:hive2://***:10000/default"
        user = "hive"
        password = "******"
        driver = "org.apache.hive.jdbc.HiveDriver"
        connection_check_timeout_sec = 100
        query = "select * from table1 limit 100"
    }
}

transform {
}

sink {
    Jdbc {
        url = "jdbc:mysql://***:23306/?rewriteBatchedStatements=true"
        driver = "com.mysql.cj.jdbc.Driver"
        user = "root"
        password = "root"
        
        database = "test"
        table = "table1"
        # primary_keys = ["key1", "key2", ...]
        schema_save_mode = "CREATE_SCHEMA_WHEN_NOT_EXIST"
        data_save_mode="DROP_DATA"
        generate_sink_sql=true
    }
}
  • 帮我查一下 957461773944946690 的运行情况,注意这里的 957461773944946690 是上一步提交作业随机生成的jobId
  • 帮我查一下正在运行的作业有哪些?
  • 帮我查一下FINSHED的作业有哪些
  • 查看集群的运行情况
  • 帮我返回系统系统监控信息
  • 帮我把957461773944946690作业停掉

🚀 如何配置

前置条件

1.安装 Python 环境(版本号 >= 3.9,推荐最新的 LTS 版本)

2.安装Apache SeaTunnel (版本号>=2.3.9)

任意一个支持 MCP 的 IDE:

  • Cursor
  • VS Code + Cline 插件

安装:

bash 复制代码
# 下载源码
git clone https://github.com/ocean-zhc/seatunnel-mcp.git
# 进入目录(比如我的下载目录:/Users/ocean/Downloads/MCP/seatunnel-mcp)
cd seatunnel-mcp
# 安装
pip install -e .

配置:

这里的SEATUNNEL_API_URL是你部署好的UI地址,后面不要带 /

json 复制代码
{
    "mcpServers": {
        "seatunnel": {
            "command": "python",
            "args": [
                "-m",
                "src.seatunnel_mcp"
            ],
            "cwd": "/Users/ocean/Downloads/MCP/seatunnel-mcp",
            "env": {
                "SEATUNNEL_API_URL": "http://www.sjjc.seatunnel.dsj.com"
            }
        }
    }
}

配置完成之后,如下图:

❓帮助与支持

可前往issue进行提问:

Support MCP:https://github.com/apache/seatunnel/issues/9047

同时我们也成立了专项交流群,感兴趣的同学可以自行添加seatunnel1小助手加入!

Apache SeaTunnel

Apache SeaTunnel是一个云原生的高性能海量数据集成工具。北京时间 2023 年 6 月1 日,全球最大的开源软件基金会ApacheSoftware Foundation正式宣布Apache SeaTunnel毕业成为Apache顶级项目。目前,SeaTunnel在GitHub上Star数量已达8k+,社区达到6000+人规模。SeaTunnel支持在云数据库、本地数据源、SaaS、大模型等170多种数据源之间进行数据实时和批量同步,支持CDC、DDL变更、整库同步等功能,更是可以和大模型打通,让大模型链接企业内部的数据。

相关推荐
小鸡吃米…5 分钟前
机器学习 - K - 中心聚类
人工智能·机器学习·聚类
好奇龙猫42 分钟前
【AI学习-comfyUI学习-第三十节-第三十一节-FLUX-SD放大工作流+FLUX图生图工作流-各个部分学习】
人工智能·学习
沈浩(种子思维作者)1 小时前
真的能精准医疗吗?癌症能提前发现吗?
人工智能·python·网络安全·健康医疗·量子计算
minhuan1 小时前
大模型应用:大模型越大越好?模型参数量与效果的边际效益分析.51
人工智能·大模型参数评估·边际效益分析·大模型参数选择
Cherry的跨界思维1 小时前
28、AI测试环境搭建与全栈工具实战:从本地到云平台的完整指南
java·人工智能·vue3·ai测试·ai全栈·测试全栈·ai测试全栈
MM_MS1 小时前
Halcon变量控制类型、数据类型转换、字符串格式化、元组操作
开发语言·人工智能·深度学习·算法·目标检测·计算机视觉·视觉检测
それども1 小时前
Apache POI XSSFWorkbook 和 SXSSFWorkbook 的区别
apache·excel
ASF1231415sd1 小时前
【基于YOLOv10n-CSP-PTB的大豆花朵检测与识别系统详解】
人工智能·yolo·目标跟踪
水如烟2 小时前
孤能子视角:“意识“的阶段性回顾,“感质“假说
人工智能
Carl_奕然2 小时前
【数据挖掘】数据挖掘必会技能之:A/B测试
人工智能·python·数据挖掘·数据分析