如何通过编程与Android UI元素交互以自动填写原生应用表单？

主流技术路径 #

• 无障碍服务（AccessibilityService）：Android官方提供的合法非Root方案，能模拟用户操作并识别界面控件

  1. 自定义继承AccessibilityService的类，重写onAccessibilityEvent方法监听界面变化
  2. 通过AccessibilityNodeInfo遍历控件树，依据className（如EditText、RadioButton）、resource-id或contentDescription定位目标控件
  3. 调用对应Action完成操作：
     • 填充文本框：targetNode.performAction(AccessibilityNodeInfo.ACTION_SET_TEXT, Bundle().apply { putCharSequence(AccessibilityNodeInfo.ACTION_ARGUMENT_SET_TEXT_CHARSEQUENCE, "待输入内容") })
     • 勾选单选按钮/点击按钮：targetNode.performAction(AccessibilityNodeInfo.ACTION_CLICK)
  4. 在Manifest中注册服务并声明权限，引导用户手动开启无障碍权限

• UI Automator：适用于自动化测试场景，需在Android测试环境运行

  1. 引入依赖：在build.gradle中添加androidTestImplementation 'androidx.test.uiautomator:uiautomator:2.2.0'
  2. 初始化设备实例：val device = UiDevice.getInstance(InstrumentationRegistry.getInstrumentation())
  3. 通过UiSelector定位控件，比如：device.findObject(UiSelector().resourceId("com.example.app:id/et_username"))
  4. 执行操作：文本框用setText()，按钮/单选框用click()

• Root权限下的原生API调用：若设备已Root，可直接调用系统InputManager模拟触摸或输入，但风险高，仅适合特殊场景

关键注意点 #

• 无障碍服务需用户手动授权，应用要做好引导说明
• UI Automator只能在测试进程运行，无法作为正式应用功能发布
• 控件定位优先使用resource-id，避免依赖文本（多语言场景会失效）

内容的提问来源于stack exchange，提问作者IdontLikeSand