scrapfly-mcp
活跃·★ 15·更新于 2026-11-15
Scrapfly MCP服务器通过模型上下文协议将AI助手连接到实时网络数据,使它们能够即时访问任何网站。它提供高级网络爬虫功能,包括绕过反机器人系统和结构化数据提取,以克服训练数据的局限性。
基础资料 · 尚未发布深度评测。功能与使用信息依据项目公开资料整理,选型前请核对官方文档。
#网络爬虫#AI集成#实时数据#反爬虫绕过#结构化数据提取#模型上下文协议#API
01
功能特性
01抓取实时数据:实时获取当前价格、列表、新闻或任何网页内容。
02绕过反机器人系统:自动处理验证码、代理、JavaScript渲染和速率限制。
03提取结构化数据:使用AI驱动的提取功能将复杂网站解析为清晰的JSON数据。
04捕获屏幕截图:截取页面或特定元素的视觉快照用于分析。
02
兼容性
VS Code
IDE集成
已通过文档验证
Visual Studio
IDE集成
已通过文档验证
Cursor
IDE集成
已通过文档验证
Claude Code
命令行工具
已通过文档验证
LangChain
框架集成
已通过文档验证
OpenAI
框架集成
已通过文档验证
03
快速开始
1
$ docker build -t scrapfly-mcp .
2
$ docker run -p 8080:8080 scrapfly-mcp
04
使用场景
↳赋能AI助手,使其能够从网络获取最新信息来回答用户查询。
↳自动化从电商网站提取产品价格或商品详情,用于竞品分析。
↳执行复杂的抓取任务,例如通过完整浏览器自动化处理登录流程。
↳通过页面或元素截图来监控网站变化或跟踪视觉元素。
05
同类工具
评论
登录后发表评论
暂无评论,来发表第一条吧