Scrapling:Scrapling 是一个为现代网络提供轻松数据提取的自适应 Python 网络抓取框架,能够处理从单个请求到全面并发爬取的所有任务。它具有先进的反机器人绕过功能、智能元素重定位以及内置代理轮换和 AI 集成的全面会话管理。;AfdianToMarkdown:这是一个爱发电(afdian.com)爬虫工具,用于下载作者的动态和作品集并保存为Markdown文件,便于离线访问和归档。它还支持MCP服务器模式,允许AI助手直接查询已下载内容,作为AI知识库服务。
执行单个网页请求或启动全面的并发网络爬取。
归档喜爱的爱发电作者的动态和作品集,用于离线阅读和个人收藏。