功能介绍

桌面操作用于在 PlugClaw 中控制 Android 设备屏幕，并完成点击、滑动、输入等基础交互。

支持能力

可以唤醒屏幕、获取屏幕尺寸、截取当前屏幕和读取当前界面的 UI 结构。需要直接操作屏幕时，可以点击、长按、滑动、输入文本，也可以执行返回、主页、电源、音量等按键操作。对于简单入口，还可以打开指定应用或链接。

使用范例

截取当前屏幕

当不确定设备当前停留在哪个页面，或准备进行点击、滑动、输入前，可以先截取当前屏幕。

1. 在 PlugClaw 对话中输入：

截取当前屏幕。

2. 查看截图内容，确认当前页面、按钮位置和输入区域。后续需要点击或滑动时，可以基于截图继续描述目标位置。

返回上一页

当页面进入了下一级菜单、弹窗或详情页，需要回到上一个页面时，可以使用返回操作。

1. 在 PlugClaw 对话中输入：

返回上一页。

2. 设备会执行 Android 返回键操作。返回后可以再次截图，确认页面是否已经回到上一层。

回到桌面

当页面操作完成，或需要从当前应用回到系统桌面时，可以使用主页操作。

1. 在 PlugClaw 对话中输入：

回到桌面。

2. 设备会执行 Android 主页键操作，回到桌面或启动器页面。回到桌面后，可以继续截图确认当前页面。