关于Appium/Selenium 4桌面驱动鼠标输入支持的官方规划问询

问题背景 #

在Appium/Selenium 4环境中执行复杂鼠标操作时，会抛出异常：

'Currently only pen and touch pointer input source types are supported.'

想咨询：Appium或Selenium团队是否有官方声明、路线图或技术见解，表明是否计划在W3C协议框架内恢复WinAppDriver等桌面驱动的可靠Mouse Input支持，或是该限制为永久设定？

相关代码示例 #

using Audiqueen.TestUtilities;
using Microsoft.VisualStudio.TestTools.UnitTesting;
using OpenQA.Selenium;
using OpenQA.Selenium.Appium;
using OpenQA.Selenium.Appium.Windows;
using OpenQA.Selenium.Interactions;
using OpenQA.Selenium.Support.UI;
using System;
using System.Collections.Generic;
using System.Collections.ObjectModel;
using System.Diagnostics;
using System.Linq;
using System.Threading;

namespace Audiqueen.AutomatedTest
{
    public class WinAppDriver : WindowsDriver
    {
        private readonly AppiumOptions AppiumOptions;

        public WindowsDriver DesktopApplicationInstance { get; set; }

        public WinAppDriver(Uri uri, AppiumOptions appiumOptions, TimeSpan timeOut) : base(uri, appiumOptions, timeOut)
        {
            AppiumOptions = appiumOptions;

            FocusOnFirstHandle();

            AppiumOptions desktopAppiumOptions = new AppiumOptions()
            {
                PlatformName = "Windows",
                AutomationName = "Windows",
                App = "Root",
            };

            desktopAppiumOptions.AddAdditionalAppiumOption("appium:newCommandTimeout", 300);

            DesktopApplicationInstance = new WindowsDriver(new Uri(TestBenchManager.WindowsApplicationDriverUrl), desktopAppiumOptions, TimeSpan.FromMinutes(1));
        }
        
        public void MouseMove(AppiumElement element, int offsetX = int.MaxValue, int offsetY = int.MaxValue)
        {
            if (offsetX == int.MaxValue && offsetY == int.MaxValue)
            {
                offsetX = element.Size.Width / 2;
                offsetY = element.Size.Height / 2;
            }

            Actions action = new Actions(this);
            action.MoveToElement(element).MoveByOffset(offsetX, offsetY).Build().Perform();
        }
    }
}

官方规划与技术说明 #

限制根源 #

这个异常源于Selenium 4对W3C WebDriver协议的全面迁移，而WinAppDriver当前的W3C协议实现仅完成了笔和触摸输入源的适配，暂未支持鼠标输入的W3C规范要求。

官方动态 #

• Selenium团队：核心团队主要聚焦Web浏览器自动化，WinAppDriver属于桌面应用自动化的衍生项目，暂无公开声明承诺直接推进其鼠标输入的W3C适配，相关维护工作更多由WinAppDriver专属团队负责。
• WinAppDriver团队：在其官方仓库的Issue跟踪中，多个涉及鼠标操作异常、W3C协议兼容的问题处于开放状态。团队曾在回复中提及正在评估W3C鼠标输入规范的适配方案，但未给出明确的路线图时间节点。
• 技术结论：该限制并非永久设定。W3C WebDriver协议本身原生支持鼠标输入类型，只是WinAppDriver的协议实现尚未完成这部分兼容工作。适配需要协调Windows UIA自动化API与W3C规范的差异，推进节奏取决于团队资源优先级。

临时替代方案 #

1. 退回旧协议：初始化AppiumOptions时添加配置"appium:useW3C": false，切换到JSON Wire协议，部分鼠标操作可恢复正常。但这是临时方案，不符合Selenium 4的长期协议规划。
2. 使用原生鼠标接口：放弃Actions类，直接调用WinAppDriver原生的Mouse接口方法（如Mouse.MoveTo）执行鼠标操作，可绕过W3C协议的输入源检查。

内容的提问来源于stack exchange，提问作者Fabiaan Joossens