Scrapling:Scrapling 是一个为现代网络提供轻松数据提取的自适应 Python 网络抓取框架,能够处理从单个请求到全面并发爬取的所有任务。它具有先进的反机器人绕过功能、智能元素重定位以及内置代理轮换和 AI 集成的全面会话管理。;docsector-reader:Docsector Reader 是一个基于 Vue 3、Quasar v2 和 Vite 构建的文档渲染引擎。它将 Markdown 内容转换为美观、可导航的文档站点,具备国际化、语法高亮、暗色/亮色模式、锚点导航等功能。该引擎提供了 AI 友好特性,包括 Markdown 内容协商、MCP 服务器、机器人检测以及多种发现端点。
执行单个网页请求或启动全面的并发网络爬取。
为开源项目或内部工具创建美观的文档网站。