如何结合WinAppDriver与Selenium WebDriver实现Siebel/Silverlight应用自动化？

我来分享下如何搞定WinAppDriver和Selenium WebDriver的联动，刚好适配你这种Silverlight/Siebel这类混合架构（桌面+Web元素）的应用自动化需求，按以下步骤操作就行：

核心思路 #

IE本身是桌面应用，我们可以用WinAppDriver控制浏览器的桌面级元素（比如地址栏、工具栏），同时通过切换Web上下文或附加已打开的IE窗口，让Selenium负责操作Web页面元素，这样就能同时覆盖桌面控件和Web内容的自动化场景。

步骤1：用WinAppDriver启动IE并完成初始导航 #

你的现有代码已经能启动IE，这里优化下等待逻辑和元素定位的稳定性：

import io.appium.java_client.windows.WindowsDriver;
import org.openqa.selenium.remote.DesiredCapabilities;
import org.openqa.selenium.remote.RemoteWebElement;
import java.net.URL;
import java.util.concurrent.TimeUnit;
import org.openqa.selenium.Keys;

public class HybridAutomation {
    public static void main(String[] args) {
        WindowsDriver<RemoteWebElement> winDriver = null;
        try {
            // 配置WinAppDriver启动参数
            DesiredCapabilities winCapabilities = new DesiredCapabilities();
            winCapabilities.setCapability("platformName", "Windows");
            winCapabilities.setCapability("deviceName", "WindowsPC");
            winCapabilities.setCapability("app", "C:\\Program Files\\Internet Explorer\\iexplore.exe");

            winDriver = new WindowsDriver<>(new URL("http://127.0.0.1:4723"), winCapabilities);
            winDriver.manage().timeouts().implicitlyWait(10, TimeUnit.SECONDS); // 延长隐式等待提升稳定性
            winDriver.manage().window().maximize();

            // 定位地址栏并导航（用inspect.exe确认元素className为"Edit"）
            RemoteWebElement addressBar = winDriver.findElementByClassName("Edit");
            addressBar.clear();
            addressBar.sendKeys("https://your-siebel-silverlight-app-url.com" + Keys.ENTER);
            
            // 等待页面加载完成（建议用显式等待替代sleep）
            Thread.sleep(3000);
        } catch (Exception e) {
            System.out.println("启动驱动或导航失败：" + e.getMessage());
        }
    }
}

步骤2：联动Selenium WebDriver操作Web元素 #

有两种常用方式实现WinAppDriver与Selenium的协同：

方式一：直接用WinAppDriver切换到Web上下文 #

WinAppDriver支持切换到IE的Web视图上下文，切换后可以直接用类Selenium的API操作Web元素：

// 切换到Web上下文
winDriver.context("WEBVIEW");

// 现在可以直接操作Web元素，比如定位登录框
winDriver.findElementById("username-input").sendKeys("test-user");
winDriver.findElementById("login-button").click();

方式二：启动Selenium IE Driver附加到现有IE窗口 #

如果你更习惯Selenium原生API，可以启动IE Driver并连接到已打开的IE进程：

import org.openqa.selenium.WebDriver;
import org.openqa.selenium.ie.InternetExplorerDriver;
import org.openqa.selenium.remote.DesiredCapabilities;

// 配置IE Driver
System.setProperty("webdriver.ie.driver", "C:\\path\\to\\IEDriverServer.exe"); // 需指定IE驱动路径
DesiredCapabilities ieCapabilities = DesiredCapabilities.internetExplorer();
ieCapabilities.setCapability("ie.attachToExisting", true); // 附加到已打开的IE窗口
ieCapabilities.setCapability("ignoreProtectedModeSettings", true); // 必须设置，否则IE会阻止连接
ieCapabilities.setCapability("ie.ensureCleanSession", false); // 保留现有会话

WebDriver webDriver = new InternetExplorerDriver(ieCapabilities);

// 用webDriver操作Web元素，winDriver继续处理桌面控件
webDriver.findElementByName("password").sendKeys("test-password");
// 示例：用WinAppDriver点击IE工具栏的自定义按钮
// RemoteWebElement toolbarBtn = winDriver.findElementById("custom-toolbar-btn");
// toolbarBtn.click();

步骤3：处理Silverlight/Siebel特殊控件 #

• Silverlight控件：Silverlight基于WPF框架，属于桌面级控件，无需切换Web上下文，直接用inspect.exe定位元素的AutomationId或ClassName，通过WinAppDriver操作即可。
• Siebel应用：Siebel通常混合了桌面工具栏和Web内容区，用inspect.exe区分元素所属进程（iexplore.exe的桌面元素 vs Web内容区元素），分别用WinAppDriver和Selenium处理。

关键注意事项 #

• 确保WinAppDriver服务已启动：在命令行运行WinAppDriver.exe（默认端口4723）。
• IE保护模式设置：将IE所有区域的保护模式设置为相同状态（全部开启或关闭），否则Selenium无法正常连接。
• 版本兼容性：使用最新版的WinAppDriver和Selenium IE Driver，避免兼容性问题。
• 优先使用显式等待：替代Thread.sleep提升脚本稳定性，示例：

  import org.openqa.selenium.support.ui.WebDriverWait;
  import org.openqa.selenium.support.ui.ExpectedConditions;
  
  WebDriverWait wait = new WebDriverWait(webDriver, 10);
  wait.until(ExpectedConditions.visibilityOfElementLocated(winDriver.findElementById("target-element")));
  

内容的提问来源于stack exchange，提问作者dangi13