Microsoft Power Automate桌面版Desktop recorder元素与窗口识别问题咨询

录制前环境校验 #

• 升级Power Automate桌面版至最新正式版，旧版本对UWP应用、Electron架构应用（如新版Edge、微信、VS Code）的元素识别存在大量已知兼容缺陷
• 关闭Windows自定义缩放，统一使用100%/125%/150%等系统推荐的整数缩放比例，非整数缩放会导致UI元素坐标计算偏移，识别失败率超过80%
• 若操作的目标应用需要管理员权限，提前右键Power Automate桌面版，选择以管理员身份运行后再启动录制，权限不足会导致无法读取高权限进程的窗口元素

录制操作规范 #

• 录制时控制操作节奏，每完成一步操作等待页面/窗口完全加载后再进行下一步，避免录制器抓取到过渡状态的无效元素
• 右键菜单、悬浮提示这类临时动态元素不要直接录制，这类元素无法被录制器捕获完整属性，后续执行识别率极低，需后续在流程编辑页手动添加「点击UI元素」动作完成拾取
• 面对自定义UI界面的小众软件、工业软件时，切换至图像识别模式录制操作，不要使用默认的UI元素拾取逻辑

录制后流程优化 #

• 打开录制完成的流程，逐个核查每个UI元素的选择器配置，删除包含随机值的动态属性（如带临时参数的title、实时坐标参数），仅保留automationid、classname这类稳定属性即可大幅提升识别成功率
• 在窗口切换、元素加载类步骤前添加*「等待窗口出现」/「等待UI元素出现」*动作，超时时间设置为3-5秒，避免执行速度快于应用响应速度导致识别失败
• 如果是浏览器内的操作场景，不要使用桌面录制器直接录制，改用Power Automate内置浏览器扩展对应的录制能力，Web元素识别准确率可提升60%以上

内容的提问来源于stack exchange，提问作者Erfan Tavoosi