crw 是开源的吗？

是的，采用 AGPL-3.0 许可证。

crw

Q: crw 是开源的吗？

是的，采用 AGPL-3.0 许可证。

活跃·★ 1.1k·AGPL-3.0·更新于 2026-10-06

★ 时下流行★ 必备神器

fastCRW是一个高性能引擎，旨在将URLs转换为简洁的Markdown或结构化JSON。它为网络搜索、抓取、映射、爬取和数据提取提供了一站式解决方案，可作为本地Rust二进制文件运行，也可通过托管API使用。

#网页抓取#数据提取#内容转换#网页爬虫#API接口#命令行工具#AI代理工具#Rust语言

功能特性

01将单个URL抓取为Markdown、HTML、链接、截图或Schema JSON

02爬取限定范围的网站并收集其页面

03在不抓取每个页面的情况下发现并映射URLs

04搜索网页并可选择性地抓取选定的结果

05从一个或多个URL中提取结构化字段

兼容性

Rust

运行时

已通过文档验证

MacOS

操作系统

已通过文档验证

Linux

操作系统

已通过文档验证

Python

SDK

已通过文档验证

Node.js

SDK

已通过文档验证

AI Agents (MCP)

集成

已通过文档验证

快速开始

$ curl -fsSL https://fastcrw.com/install | sh

使用场景

↳将网页内容转换为结构化数据（Markdown/JSON），以便进行进一步处理或存储。

↳构建需要实时和结构化网络信息的AI代理。

↳收集市场调研、竞品分析或内容聚合所需的数据。

↳监控网站变化或跟踪多个页面上的特定数据点。

↳通过SDK或REST API将网页数据提取功能集成到自定义应用程序中。

同类工具

mcp-chrome★ 12.5k

将您的Chrome浏览器变成智能助手，让AI掌控浏览器，实现强大的自动化功能。

Scrapling★ 86.0k

Scrapling 是一个自适应的网络抓取框架，能够处理从单个请求到大规模爬取的所有任务，并能有效绕过反机器人系统。

Gemini CLI★ 107.2k

Gemini CLI 是一个开源的 AI 代理，将 Gemini 的强大功能直接带入您的终端，提供轻量级访问，让您的提示能够最直接地到达模型。

GPT Researcher★ 29.9k

GPT研究员是一个开放的深度研究智能体，旨在对任何给定任务进行网络和本地研究，并生成详细、事实准确且公正的报告。

letta★ 25.1k

Letta是一个用于构建有状态智能体的平台：具有高级记忆功能的人工智能，能够随着时间学习和自我改进。

sre★ 1.3k

SmythOS是一个开源的AI代理操作系统，提供运行时环境（SRE）、软件开发工具包（SDK）和命令行界面（CLI），用于构建、运行和管理AI代理。

nunu★ 2.6k

Nunu是一个用于构建Go应用程序的命令行脚手架工具。

grafbase★ 1.2k

Grafbase是一个自托管的、由Rust驱动的GraphQL联邦网关，旨在为任务关键型API提供高性能。

查看全部替代品 →

登录后发表评论

暂无评论，来发表第一条吧

crw

活跃·★ 1.1k·AGPL-3.0·更新于 2026-10-06

★ 时下流行★ 必备神器

#网页抓取#数据提取#内容转换#网页爬虫#API接口#命令行工具#AI代理工具#Rust语言

功能特性

01将单个URL抓取为Markdown、HTML、链接、截图或Schema JSON

02爬取限定范围的网站并收集其页面

03在不抓取每个页面的情况下发现并映射URLs

04搜索网页并可选择性地抓取选定的结果

05从一个或多个URL中提取结构化字段

兼容性

Rust

运行时

已通过文档验证

MacOS

操作系统

已通过文档验证

Linux

操作系统

已通过文档验证

Python

SDK

已通过文档验证

Node.js

SDK

已通过文档验证

AI Agents (MCP)

集成

已通过文档验证

快速开始

$ curl -fsSL https://fastcrw.com/install | sh

使用场景

↳将网页内容转换为结构化数据（Markdown/JSON），以便进行进一步处理或存储。

↳构建需要实时和结构化网络信息的AI代理。

↳收集市场调研、竞品分析或内容聚合所需的数据。

↳监控网站变化或跟踪多个页面上的特定数据点。

↳通过SDK或REST API将网页数据提取功能集成到自定义应用程序中。

同类工具

mcp-chrome★ 12.5k

将您的Chrome浏览器变成智能助手，让AI掌控浏览器，实现强大的自动化功能。

Scrapling★ 86.0k

Scrapling 是一个自适应的网络抓取框架，能够处理从单个请求到大规模爬取的所有任务，并能有效绕过反机器人系统。

Gemini CLI★ 107.2k

Gemini CLI 是一个开源的 AI 代理，将 Gemini 的强大功能直接带入您的终端，提供轻量级访问，让您的提示能够最直接地到达模型。

GPT Researcher★ 29.9k

GPT研究员是一个开放的深度研究智能体，旨在对任何给定任务进行网络和本地研究，并生成详细、事实准确且公正的报告。

letta★ 25.1k

Letta是一个用于构建有状态智能体的平台：具有高级记忆功能的人工智能，能够随着时间学习和自我改进。

sre★ 1.3k

SmythOS是一个开源的AI代理操作系统，提供运行时环境（SRE）、软件开发工具包（SDK）和命令行界面（CLI），用于构建、运行和管理AI代理。

nunu★ 2.6k

Nunu是一个用于构建Go应用程序的命令行脚手架工具。

grafbase★ 1.2k

Grafbase是一个自托管的、由Rust驱动的GraphQL联邦网关，旨在为任务关键型API提供高性能。

查看全部替代品 →

登录后发表评论

暂无评论，来发表第一条吧