使用Python+uiautomator dump自动化Snapchat发图时按钮坐标返回0,0求助

问题背景 #

尝试用Python结合uiautomator dump实现Snapchat发图自动化时，拍摄照片后准备点击发送按钮，发现uiautomator dump返回该按钮及其所有父节点的坐标均为[0,0][0,0]，无法获取实际坐标完成自动点击。

附相关节点信息：

<node index="0" text="" resource-id="" class="android.widget.FrameLayout" package="com.snapchat.android" content-desc="" checkable="false" checked="false" clickable="false" enabled="true" focusable="false" focused="false" scrollable="false" long-clickable="false" password="false" selected="false" bounds="[0,0][0,0]">
    <node index="0" text="" resource-id="com.snapchat.android:id/send_btn_layout" class="android.view.ViewGroup" package="com.snapchat.android" content-desc="" checkable="false" checked="false" clickable="true" enabled="true" focusable="true" focused="false" scrollable="false" long-clickable="false" password="false" selected="false" bounds="[0,0][0,0]">
        <node index="0" text="Send To" resource-id="com.snapchat.android:id/send_btn_hint_label" class="android.widget.TextView" package="com.snapchat.android" content-desc="" checkable="false" checked="false" clickable="false" enabled="true" focusable="false" focused="false" scrollable="false" long-clickable="false" password="false" selected="false" bounds="[0,0][0,0]" />
        <node index="1" text="" resource-id="com.snapchat.android:id/send_btn" class="android.widget.ImageButton" package="com.snapchat.android" content-desc="Send" checkable="false" checked="false" clickable="false" enabled="true" focusable="true" focused="false" scrollable="false" long-clickable="false" password="false" selected="false" bounds="[0,0][0,0]" />
    </node>
</node>

解决办法与替代方案 #

• 改用uiautomator2直接定位元素：无需手动解析dump的坐标，uiautomator2支持通过resource-id、content-desc直接操作可交互元素。观察节点信息，com.snapchat.android:id/send_btn_layout是可点击的父容器，直接定位点击即可：

import uiautomator2 as u2

# 连接设备（确保adb已连接）
d = u2.connect()
# 定位并点击发送按钮布局
d(resourceId="com.snapchat.android:id/send_btn_layout").click()

• 延迟等待UI加载稳定：发送按钮可能因动画过渡未完成布局，导致dump返回异常坐标。在执行dump前添加延迟，等待UI稳定：

import time
from uiautomator import Device

d = Device()
time.sleep(2)  # 等待2秒让UI完成动画
# 再执行dump或定位操作

• 基于屏幕比例的坐标点击：如果以上方法都无效，可通过adb模拟点击屏幕相对位置（比如发送按钮通常在右下角），适合临时场景：

import os
# 示例：点击分辨率1080x2340的右下角区域，可根据设备分辨率调整
os.system("adb shell input tap 900 2100")

• 使用AccessibilityService辅助：若uiautomator系列工具无法识别元素，可编写Android AccessibilityService，通过监听界面元素变化定位并点击发送按钮。此方法需在设备上开启对应辅助服务权限，能绕过部分APP的UI隐藏限制。

内容的提问来源于stack exchange，提问作者NielsNasibal