待验证50% 置信事实精确时间
在桌面场景中，智能体通常通过辅助功能 API（如 macOS 的 Accessibility API）或屏幕截图加视觉识别来操控应用界面。
1
来源数
50%
置信度
长期有效
时效性
2026/11/1
首次发现
来源
涉及实体
相关事实
待验证application-use使用macOS Accessibility API实现桌面自动化，该API可以枚举任意应用窗口中的UI元素层级树，获取按钮、文本框、菜单项的位置、标签、状态等属性79% 相似待验证macOS辅助功能API允许程序查询UI元素标识符、位置、文本和交互状态并模拟操作，无需依赖图像识别，与Windows的UI Automation和Linux的AT-SPI是同类机制79% 相似已验证macOS Accessibility API最初设计目的是帮助视障等残障用户使用计算机，使用该API需要用户在系统偏好设置中显式授予辅助功能权限78% 相似待验证macOS 提供 Accessibility API 和系统级事件监听机制，允许应用在授权后获取活跃窗口、文档标题、URL 等上下文信息而无需侵入性屏幕截图76% 相似待验证实现刘海区域自定义信息显示通常需要借助 macOS 的辅助功能 API 或窗口层级控制，并处理全屏应用、多显示器、深色模式等兼容性问题。75% 相似
引用此条事实
Stable URI
https://kongchang.com/claim/1123494API
curl https://kongchang.com/api/v1/knowledge/claims/1123494MCP
get_claim(id=1123494)