harmonyos-device-automation - 通过视觉交互自动化 HarmonyOS 设备
使用 Midscene 和 HDC 基于屏幕截图自动化 HarmonyOS NEXT 设备,包括应用启动、界面操作、文本输入、截图和断言。
标签
更新于: 2026-10-03能力
典型输入
典型输出
该技能可以做什么
- 连接 HarmonyOS 设备
- 启动应用和网址
- 运行 HDC Shell 命令
- 获取设备截图
- 执行视觉界面操作
- 断言可见屏幕状态
- 记录瞬态界面状态
输入
- 已连接的 HarmonyOS 设备
- 自然语言任务
- 设备标识符
- 参考图像
输出
- 设备界面状态变化
- 截图图像文件
- 命令执行结果
- 断言结果
- 录制清单文件
要求
- Bash Shell 访问权限
- Node.js 和 npx
- 已安装 HDC
- HDC 设备访问权限
- 已配置视觉模型
- 模型环境变量
