Scrapling:Scrapling 是一个为现代网络提供轻松数据提取的自适应 Python 网络抓取框架,能够处理从单个请求到全面并发爬取的所有任务。它具有先进的反机器人绕过功能、智能元素重定位以及内置代理轮换和 AI 集成的全面会话管理。;firefox-devtools-mcp:Firefox DevTools MCP 是一个通过 Selenium 的 WebDriver BiDi 自动化 Firefox 浏览器的模型上下文协议(MCP)服务器。它允许 AI 助手(如 Claude)控制浏览器操作,如导航、截图和网络监控。它与包括 Claude Code、Cursor 和 Cline 在内的多种 MCP 客户端集成。
执行单个网页请求或启动全面的并发网络爬取。
AI 驱动的浏览器自动化测试和抓取