技术进步的浪潮从未停歇,面向功能的编程与MCP工具的崛起,我们如何利用AI工具在当今焦虑的环境市场中保持竞争力呢?
👇接下来,手把手,用MCP实现逆向分析,来向各位展示结合mcp爬虫工具全自动抓包接口。
🔥mcp
📚学习目标
熟练mcp协议的抓包工具使用方法。
- 协议名:模型上下文协议(MCP)
- 发布方:Anthropic公司
- 发布时间:2024年11月底
- 协议性质:开源开放的标准化协议
- 核心目标 :
- 实现大型语言模型(LLM)与外部数据源/工具的无缝集成
- 提供标准化接口
- 功能特点 :
- 使AI应用能安全、可控地交互本地/远程资源
🐳价值
MCP 协议让 AI 与各类软件直接交互,避免手动复制,提高自动化程度。
-
MCP 协议的作用:
- 消除 AI 工具与外部软件之间的数据复制步骤,实现直接交互。
-
传统使用 AI 的痛点:
- 文员需要手动复制表格数据到 AI 工具分析。
- 程序员需要复制代码到 AI 工具提问。
- 额外操作步骤降低效率。
-
MCP 带来的改进:
- 软件厂商可开发支持 MCP 的版本。
- AI 工具能直接对接 MCP 兼容的软件(如表格工具、代码编辑器)。
- AI 可直接访问软件内容,无需手动复制粘贴。
-
核心优势:
- 减少操作步骤,提升 AI 使用效率。
- 无缝集成,AI 可直接读取和操作外部软件数据。
🔥安装
vscode装cline
去插件库搜cline
后,点安装。安装好之后呢,在左边,有一个机器人的头像。点进去之后,点齿轮⚙里面去配置。
这里可以配OpenRouter
:

这里哈,我建议各位,如果一开始去玩,可以小小充点马内去熟悉里面的功能,当然,免费的随便去搜来用,在model
里面去搜free
的模型去免费试试。
这里配deepseek
:

这里选的是deepseek-chat
,充10块钱可以用很久,一开始可以用一下。当然,也可以像openRouter
一样去搜free
的模型。当然free
的也有些有可能有token
限制。
接着。
browser-tools-mcp
有哪些软件支持呢?在它的这个MCP Server的Marketplace
里面它其实会有很多的选项 这些工具都是现在支持MCP服务的。
我们这里呢,搜一下
browser-tools-mcp
。
我们可以从它的简介上可以看到,和这个browser-tools
是一个浏览器监控
和交互
的工具包,使AI
工具能够通过Chrome
扩展程序捕获屏幕截图、分析控制台日志、跟踪网络活动、执行审计以及与DOM元素交互。
点击安装后,我们还需要提前准备一些工具:
1、运行这个Browser-Tools-MCP
呢,需要安装chrome扩展程序的拓展工具,下载之后,就会有一个文件夹包,去谷歌的扩展程序里,去点击开发者模式
-加载已解压的扩展程序
;
2、然后去vscode
里面去安装MCP服务器
: npx @agentdeskai/browser-tools-mcp@latest
;

点击Configure MCP Servers
去配置cline_mcp_settings.json
:

配置完成后,就可以看到Installed
那边就有一个Browser Tools
,打开的状态的mcp了。
3、接着在新的终端窗口,输入命令npx @agentdeskai/browser-tools-server@latest
:

当鼠标右击点击检查的时候,会显示"BrowserTools MCP" 已开始调试此浏览器
,就是这个工具可以用来监控
或者抓包
。
在Cline
上搜当前通过browser-tools服务打开的抓包工具选中的标签是什么

用这个工具自动抓包
1、第一步,打开百度主页,然后右侧打开审查,找到百度热搜
的接口,

2、第二步,在cline
输入,我现在打开的是百度,选中了一个接口,把这个接口的响应内容输出到一个cvs中,然后导出打开给我。
。


接着cline
中的deepseek
结合browser-tool-mcp
就可以把这个接口爬虫抓包出来,然后自动自行输入到cvs
中给我们了。然后cline的deepseek会自行找到本地的cvs工具打开展示:

🔥总结
就是说,有了这个cline
和mcp
这个browser-tool-mcp
一结合,我们不需要再去页面上粘贴了内容,去问deepseek
,不对了然后再调整,然后再问。
这两个相结合,browser-tool-mcp
会自行帮我们审查和监视,我们要做的只是需要打开相对应的网址
,然后,输入我们的爬虫需求,让deepseek
结合mcp
去帮我们自动去做。
如果说只有deepseek
没有mcp
是半自动化,那结合了mcp
,有了mcp
,很多东西就可以趋向于全自动化了。通过结合mcp
,抓包过程就可以完全自动化,节省了大量时间和精力。