glass
活跃·★ 19·Apache-2.0·更新于 2026-10-22
Glass 为 AI 编码代理提供了启动、驱动和验证外部原生 GUI 应用程序的能力，从而实现了闭环的构建、查看、交互和调试过程。它能够捕获屏幕内容、注入输入、读取日志并检测视觉变化，作为黑盒与任何 GUI 应用程序在多个操作系统上协同工作。
#AI 代理#GUI 自动化#跨平台#原生应用#调试#UI 测试#辅助功能#黑盒测试
01
功能特性
01使 AI 代理能够独立启动、驱动和验证原生 GUI 应用程序。
02提供全面的交互能力：屏幕捕获、输入注入（鼠标/键盘）、日志读取和视觉变化检测。
03通过辅助功能树支持语义交互，实现更可靠的 UI 自动化，不依赖屏幕截图。
04作为外部黑盒与任何原生 GUI 应用程序（不限工具包或语言）协同工作。
05跨平台支持 Linux (X11/Wayland)、Windows、Android (AVD)、iOS (Simulator) 和 macOS。
02
兼容性
Linux
运行操作系统
已通过文档验证
Windows
运行操作系统
已通过文档验证
Android
目标操作系统
已通过文档验证
iOS
目标操作系统
已通过文档验证
macOS
运行操作系统
已通过文档验证
Rust
构建语言
已通过文档验证
03
快速开始
1
$ cargo build --release
04
使用场景
↳AI 代理通过辅助功能树重现错误并验证修复来调试 GUI 应用程序。
↳自动化 AI 驱动的 UI 应用程序开发的构建-查看-交互-调试循环。
↳使用 AI 代理进行原生应用程序的 UI 测试和验证。
↳使编码代理能够使用元素 ID 而非像素坐标，语义化地驱动和交互应用程序。
05
同类工具
评论
登录后发表评论
暂无评论，来发表第一条吧