Linux Wayland环境下如何通过程序模拟点击GUI应用按钮？

Wayland下确实可以实现模拟特定GUI按钮的点击操作，只是不能像X11下用xdotool那样直接全局操作——这是因为Wayland的安全模型限制了跨窗口的输入模拟和控件识别，需要针对应用类型或使用的 compositor 选择对应方案：

方案1：利用AT-SPI2（跨GTK/QT应用的通用方法） #

大部分GTK、QT开发的GUI应用都支持AT-SPI2辅助技术接口，通过这个接口可以直接定位到按钮控件并模拟点击，不需要依赖窗口坐标，是最可靠的方案。

步骤： #

1. 安装依赖工具：

sudo apt install python3-pyatspi2 gir1.2-atspi-2.0  # Debian/Ubuntu系
# 其他发行版对应包名类似，比如Fedora用dnf安装python3-pyatspi

2. 编写Python脚本定位并点击按钮：

import pyatspi
import time

# 递归查找包含"更新"字样的按钮控件
def find_update_button(container):
    for child in container:
        if child.getRoleName() == "push button" and "更新" in child.name:
            return child
        found = find_update_button(child)
        if found:
            return found
    return None

# 等待应用启动（可根据实际情况调整延迟）
time.sleep(3)

# 遍历桌面应用，找到目标应用（替换为你的应用名称）
desktop = pyatspi.Registry.getDesktop(0)
target_app = None
for app in desktop:
    if app.name == "你的应用名称":
        target_app = app
        break

if target_app:
    update_btn = find_update_button(target_app)
    if update_btn:
        # 获取按钮的屏幕坐标并模拟左键点击
        btn_x, btn_y = update_btn.getPosition()
        pyatspi.Registry.generateMouseEvent(btn_x, btn_y, pyatspi.MOUSE_BUTTON1, pyatspi.MOUSE_CLICK)
        print("已触发更新按钮点击")
    else:
        print("未找到更新按钮，请检查按钮名称是否包含'更新'")
else:
    print("未找到目标应用，请确认应用已启动且名称正确")

方案2：针对wlroots系 compositor（Sway、Hyprland等）的坐标模拟 #

如果你的Wayland compositor基于wlroots（比如Sway、Hyprland），可以结合窗口信息工具和输入模拟工具实现坐标点击：

1. 安装依赖：

sudo apt install wlrctl wtype  # Debian/Ubuntu系

2. 操作流程：

• 先获取目标窗口的ID：

wlrctl window list

• 获取窗口的几何位置（左上角坐标、宽高）：

wlrctl window get <窗口ID> geometry

• 计算更新按钮的绝对屏幕坐标（假设按钮相对于窗口左上角的偏移是100, 200）：

# 假设窗口左上角坐标是(50, 50)，则绝对坐标为50+100=150，50+200=250
wtype -M BTN_LEFT -x 150 -y 250 -m BTN_LEFT

-M是按下按钮，-m是松开按钮，组合起来模拟一次点击。

为什么ydotool不行？ #

ydotool是模拟底层输入事件，属于全局输入模拟——它无法定位到特定窗口，只能向当前前台窗口发送点击事件，而且需要root权限，完全不适合针对特定应用按钮的操作场景。

内容的提问来源于stack exchange，提问作者RadicalEdward