Cradle:Cradle是一个框架,它使基础模型能够使用类似人类的界面控制计算机,以屏幕截图作为输入并生成键盘/鼠标操作作为输出。它支持控制各种游戏和软件,使AI智能体能够在不同应用程序中执行复杂的任务。;Open Interpreter:Open Interpreter 让 LLM 通过自然语言对话界面在本地执行 Python、JavaScript、Shell 等代码,赋予 AI 直接访问计算机的能力:创建编辑文件、控制浏览器、分析数据集和运行任意程序,安装后在终端运行 `interpreter` 即可使用。
在复杂视频游戏中实现游戏自动化。
通过自然语言自动化复杂的本地文件和数据操作任务