使用HtmlUnit访问Google遇‘class是保留字’脚本错误求助

问题根源 #

这个错误是因为Google页面的JavaScript代码使用了ES6的class关键字，但你的HtmlUnit配置中，JavaScript引擎未启用ES6支持，或者模拟的浏览器版本过旧，导致引擎将class识别为保留字而报错。

解决方案 #

1. 升级HtmlUnit到最新版本 #

优先确保使用最新版的HtmlUnit，新版本对现代JavaScript（ES6+）的支持更完善，很多旧版本的语法兼容问题已被修复。

2. 调整WebClient的配置 #

修改你的WebManager类构造方法，添加以下关键配置：

public WebManager(Boolean css, Boolean javaScript) {
    // 模拟较新的Chrome版本，比如当前稳定版
    web = new WebClient(BrowserVersion.CHROME_120);
    
    // 启用JavaScript（按需配置）
    web.getOptions().setJavaScriptEnabled(javaScript);
    
    // 关闭脚本错误抛出，避免因页面脚本兼容问题中断程序
    web.getOptions().setThrowExceptionOnScriptError(false);
    
    // 启用ES6+语法支持，让引擎正确识别class关键字
    web.getOptions().setJavaScriptEngineOptions(new JavaScriptEngineOptions()
        .setEcmaScriptVersion(EcmaScriptVersion.ES6));
    
    web.getOptions().setCssEnabled(css);
    
    // 可选：关闭不必要的日志，减少控制台干扰
    java.util.logging.Logger.getLogger("com.gargoylesoftware").setLevel(Level.OFF);
    java.util.logging.Logger.getLogger("org.apache.commons.httpclient").setLevel(Level.OFF);
}

3. 补充说明 #

• 关闭脚本错误抛出：如果你的业务仅需获取页面内容或完成简单交互，这个设置能让程序忽略页面的脚本兼容问题，继续执行后续逻辑。
• 模拟新版本浏览器：Google会根据浏览器版本返回不同的JS代码，新版本浏览器对应的代码更适配HtmlUnit的解析能力。
• ES版本设置：明确指定ES6版本，让JavaScript引擎不再将class视为保留字，解决核心报错问题。

内容的提问来源于stack exchange，提问作者Erasedsword