macOS下Selenium调用Chrome无头模式报set_headless属性缺失如何解决

问题原因 #

• 你当前使用的Selenium为4.0及以上版本，Selenium 3中提供的set_headless()方法已经被官方移除，直接调用会触发AttributeError错误
• 额外存在导入错误：你导入的Chrome类来自Python内置webbrowser模块，并非Selenium的Chrome驱动类，即使无头模式问题修复后，后续也会触发类型不匹配报错

修复后的完整代码 #

# 修正Chrome类的导入来源，移除不需要的webbrowser导入
from selenium.webdriver import Chrome
from dolphin.common.commonlogger import CommonLogger
from selenium.webdriver import chrome
from selenium.webdriver.chrome.options import Options
from selenium.webdriver.common.keys import Keys
# 导入By类用于标准元素定位
from selenium.webdriver.common.by import By


class FetchMusic:

    def __init__(self):
        print("fetch...")


if __name__ == '__main__':
    opts = Options()
    # 替换已废弃的set_headless()，用Chrome原生参数开启无头模式
    opts.add_argument("--headless=new")
    # 可选添加参数避免沙箱权限问题，mac系统下运行更稳定
    opts.add_argument("--no-sandbox")
    opts.add_argument("--disable-dev-shm-usage")
    assert opts.headless  # Operating in headless mode
    browser = Chrome(executable_path=r"/Applications/Google Chrome.app/Contents/MacOS/Google Chrome",
                     options=opts)
    browser.implicitly_wait(3)
    browser.get('https://ca.finance.yahoo.com/quote/AMZN/profile?p=AMZN')
    # 替换已废弃的find_elements_by_xpath写法
    results = browser.find_elements(By.XPATH, '//*[@id="quote-header-info"]/div[3]/div/div/span[1]')
    for result in results:
        print(result.text)

调整说明 #

• 如果你使用的Chrome版本低于112，将--headless=new替换为--headless=chrome即可
• Selenium 4.6以上版本内置了ChromeDriver自动管理能力，你可以删除executable_path参数，无需手动指定Chrome可执行文件路径，程序会自动匹配对应版本的驱动
• 添加的--no-sandbox和--disable-dev-shm-usage参数用于规避mac/Linux环境下Chrome的权限限制、共享内存不足问题，提升运行稳定性

内容的提问来源于stack exchange，提问作者Dolphin