Cradle
活跃·★ 2.5k·更新于 2024-11-07
★ 时下流行
Cradle框架使新兴基础模型能够通过人类使用的统一界面（即屏幕截图作为输入，键盘和鼠标操作作为输出）执行复杂的计算机任务。
Cradle是一个框架，它使基础模型能够使用类似人类的界面控制计算机，以屏幕截图作为输入并生成键盘/鼠标操作作为输出。它支持控制各种游戏和软件，使AI智能体能够在不同应用程序中执行复杂的任务。
#AI 智能体#通用计算机控制#大型语言模型#计算机视觉#人机交互
01
功能特性
01使基础模型能够实现通用计算机控制。
02采用统一的类人交互界面：以屏幕截图为输入，生成键盘和鼠标操作作为输出。
03支持包括流行游戏（如RDR2、星露谷物语）和生产力软件（如Chrome、Outlook）在内的多种应用。
04提供模块化框架，旨在方便地适应和迁移到新的游戏和软件环境。
05集成了多种大型语言模型（LLM）API，包括OpenAI、Azure OpenAI和Claude。
02
兼容性
OpenAI
API支持
已通过文档验证
Azure OpenAI
API支持
已通过文档验证
Anthropic Claude
API支持
已通过文档验证
AWS Restful API for Claude
API支持
已通过文档验证
VS Code
支持的IDE
已通过文档验证
PyCharm
支持的IDE
已通过文档验证
03
快速开始
1
$ pip install -r requirements.txt
04
使用场景
↳在复杂视频游戏中实现游戏自动化。
↳执行游戏内管理和任务进程。
↳控制和交互各种桌面应用程序以完成生产力或创意任务。
05
同类工具
相关搜索
评论
登录后发表评论
暂无评论，来发表第一条吧