附加应用
“附加应用”让你从已经打开的应用中选择一个窗口,把它作为当前消息的上下文。它不是把选择时看到的旧截图直接发出去;EvoX 会在你真正发送消息时重新抓取一次所选窗口。
根据我打开的项目简报,整理今天需要确认的三件事。
选择一个窗口
让模型看到你打开的某个窗口
附加一个窗口
- 在会话或协作输入框中输入
@。 - 选择 应用。
- 从窗口列表中选择一个已经打开的窗口。
- 确认附件卡上的应用名称和窗口内容。
- 选择需要的档位,再发送消息。
附件卡中的缩略图只帮助你确认选择。窗口在发送前已经关闭、被系统保护或无法抓取时,EvoX 会提示重新选择,而不是继续使用过期画面。
选择观察、读取或操作
| 档位 | EvoX 获得的内容 | 适合什么任务 |
|---|---|---|
| 观察 | 所选窗口在发送时的当前画面。 | 看布局、图表、设计稿、错误提示或视觉状态。 |
| 读取 | 当前画面,以及应用通过系统辅助功能接口提供的可读文字。 | 提取界面文字、表格内容或控件标签,减少从像素猜字。 |
| 操作 | 在观察和读取基础上,只允许在所选窗口内部点击和输入。窗口外动作会被拒绝。 | 当前连接明确支持窗口内操作,并且任务确实需要交互时。 |
“操作”不是所有连接都会显示。它受当前连接能力和计算机使用入口限制;没有满足条件时,EvoX 会直接不提供这个档位,而不是显示一个无法使用的按钮。
权限和平台
- Windows:源码包含原生窗口枚举和抓取实现。
- macOS:附加应用需要 macOS 14 或更高版本,并需要屏幕录制权限。
- 读取界面文字:可能还需要辅助功能权限;部分应用不会向系统暴露可读界面结构。
- 受保护窗口:系统可能永久拒绝抓取,重复重试不会改变结果。
macOS 授权后,已经运行的 EvoX 进程可能仍无法立即获得权限。按界面提示重启 EvoX,再重新选择窗口。
写清楚你要它做什么
附加窗口之后,继续说明目标、允许的动作和停止条件。例如:
text
读取这个窗口中的版本看板,列出今天到期且没有负责人的项目。
不要点击、修改或提交任何内容。
如果使用操作档,应明确允许点击或填写的控件,并要求在提交、删除、付款、发送消息或离开所选窗口前停止确认。
隐私和限制
只选择完成任务所需的窗口,并先关闭无关通知、客户资料和验证码。读取档获得的文字与截图会一起进入当前消息上下文;操作档还会允许窗口内输入,因此需要比普通图片附件更严格地控制范围。
只需要分析一张静态截图时,使用图像输入更简单。全桌面控制的当前开放状态见计算机使用。
EvoX 文档 · 功能 · 能力