使用HtmlUnit捕获网格刷新AJAX请求失败，求排查方案

以下是你可能遗漏的核心检查点，按优先级逐一排查：

1. 确认WebConnectionWrapper的初始化时机 #

必须在所有页面访问操作之前完成WebClient的包装，否则后续请求不会被监听。示例代码：

// 先初始化WebClient并完成连接包装
WebClient webClient = new WebClient(BrowserVersion.CHROME);
new WebConnectionWrapper(webClient) {
    @Override
    public WebResponse getResponse(WebRequest request) throws IOException {
        // 记录请求URL
        System.out.println("请求URL: " + request.getUrl());
        return super.getResponse(request); // 必须调用父类方法，否则请求不会实际发送
    }
};
// 之后再执行访问根站点、登录、进入列表页的操作

如果在登录或进入列表页后才包装，不仅会丢失部分请求监听，还可能导致会话状态异常。

2. 延长JavaScript执行等待时间 #

表格每30秒刷新，需确保HtmlUnit有足够时间等待定时器触发AJAX请求：

• 全局设置JS执行超时：

webClient.getOptions().setJavaScriptTimeout(60000); // 设置为60秒，覆盖30秒的刷新间隔

• 进入列表页后主动等待后台JS执行：

HtmlPage listPage = webClient.getPage("www.mysite.com/list");
// 等待后台JS任务完成，最多等待60秒
webClient.waitForBackgroundJavaScript(60000);

3. 排查JavaScript兼容性问题 #

HtmlUnit的JS引擎对现代语法支持有限，可能导致定时器或AJAX逻辑无法正常运行：

• 使用最新版本的HtmlUnit，新版本会修复更多JS兼容问题；
• 启用JS错误日志排查脚本异常：

webClient.getOptions().setThrowExceptionOnScriptError(false); // 避免脚本错误中断流程
webClient.setJavaScriptErrorListener(new DefaultJavaScriptErrorListener() {
    @Override
    public void scriptException(HtmlPage page, ScriptException scriptException) {
        System.err.println("JS异常: " + scriptException.getMessage());
    }
});

若发现JS报错，需针对报错内容做兼容处理，比如禁用不支持的特性。

4. 确认会话状态正常保留 #

登录后的Cookie是否正确携带，是AJAX请求能否发起的核心：

• 确认Cookie管理已启用（默认启用，可手动验证）：

webClient.getCookieManager().setCookiesEnabled(true);

• 登录后打印Cookie，检查会话标识（如JSESSIONID）是否存在：

Set<Cookie> cookies = webClient.getCookieManager().getCookies();
for (Cookie cookie : cookies) {
    System.out.println(cookie.getName() + ": " + cookie.getValue());
}

若Cookie丢失，AJAX请求可能因未授权被静默拦截，自然无法被捕获。

5. 模拟真实浏览器的加载状态 #

部分页面会在DOMContentLoaded或window.load事件后才初始化定时器，需提升HtmlUnit的模拟真实度：

• 启用自动重定向：

webClient.getOptions().setRedirectEnabled(true);

• 指定最新Chrome浏览器版本：

WebClient webClient = new WebClient(BrowserVersion.CHROME);

6. 检查AJAX请求的触发条件 #

少数页面需要特定DOM状态（如表格可见、页面滚动）才会触发定时器，可尝试模拟页面滚动：

HtmlPage listPage = webClient.getPage("www.mysite.com/list");
// 模拟滚动到页面底部，触发可能的加载逻辑
listPage.executeJavaScript("window.scrollTo(0, document.body.scrollHeight);");
webClient.waitForBackgroundJavaScript(30000);

内容的提问来源于stack exchange，提问作者Lucho82