anansi
活跃·★ 90·Apache-2.0·更新于 2026-05-18
★ 时下流行★ 浏览器自动化★ API 集成
一个自愈合、抗机器人检测的智能网络爬虫框架。
Anansi是一个弹性的网络爬虫,能够处理敌对网站、抵御改版并随时间改进。它具有自愈合CSS选择器、自动浏览器升级、TLS指纹模仿和自适应速率限制。它附带一个MCP服务器,用于LLM集成。
#adaptive-scraping#AI 智能体#anti-bot
一个自愈合、抗机器人检测的智能网络爬虫框架。
Anansi是一个弹性的网络爬虫,能够处理敌对网站、抵御改版并随时间改进。它具有自愈合CSS选择器、自动浏览器升级、TLS指纹模仿和自适应速率限制。它附带一个MCP服务器,用于LLM集成。
Self-healing selectors that repair themselves on hostile sites is genuinely impressive
Used this for competitive intelligence pipelines where target sites change frequently
The resilience engineering is thoughtful, handles JavaScript-heavy sites well
Most scrapers break when sites update, Anansi adapts instead of failing