Selenium Chrome WebDriver加载Avnet网站搜索框无自动补全问题排查

这个问题我之前帮同行排查过类似场景，大概率是网站针对WebDriver的自动化特征做了限制，而非WebDriver本身的渲染机制问题。下面给你拆解具体原因和验证解决方法：

• 网站的反自动化检测逻辑
  很多电商或企业官网会通过前端JS检测浏览器的navigator.webdriver属性：普通Chrome会话中这个属性值是undefined，但WebDriver默认会把它设为true。网站一旦识别出当前是自动化会话，就可能禁用一些非核心交互功能（比如搜索自动补全），防止爬虫批量抓取数据。

• WebDriver默认配置的差异
  WebDriver启动的Chrome默认是“干净”的会话，没有加载你的本地用户配置、扩展程序，甚至某些JS事件的触发逻辑和普通浏览器略有不同。这可能导致搜索框的自动补全触发条件（比如输入时的input事件监听、后台AJAX请求）没有正常执行。

• 验证与解决方法
  你可以先尝试隐藏WebDriver的自动化标识，看看能不能恢复自动补全功能：
  方法一：通过ChromeOptions添加参数禁用自动化控制特征

  from selenium import webdriver
  from selenium.webdriver.chrome.options import Options
  
  chrome_options = Options()
  # 禁用自动化控制标识
  chrome_options.add_argument("--disable-blink-features=AutomationControlled")
  driver = webdriver.Chrome(options=chrome_options)
  driver.get("https://www.avnet.com/wps/portal/us")
  

  方法二：通过CDP命令修改navigator.webdriver属性

  from selenium import webdriver
  
  driver = webdriver.Chrome()
  # 在页面加载前注入脚本，修改webdriver属性
  driver.execute_cdp_cmd("Page.addScriptToEvaluateOnNewDocument", {
    "source": """
      Object.defineProperty(navigator, 'webdriver', {
        get: () => undefined
      })
    """
  })
  driver.get("https://www.avnet.com/wps/portal/us")
  

如果上面的方法还是不生效，可能网站还有其他检测手段（比如检测输入速度、窗口尺寸是否符合人工操作习惯），但navigator.webdriver是最常见的限制点，优先排查这个。

内容的提问来源于stack exchange，提问作者echo