如何使用Python的Selenium自动处理未知弹窗？

针对全天候爬取时未知弹窗导致报错的问题，以下是几个实用的解决思路：

一、补充更全面的Chrome启动参数 #

仅用--disable-notifications和--disable-popup-blocking不足以覆盖所有场景，试试添加这些参数强化拦截：

options = webdriver.ChromeOptions()
# 保留原参数
options.add_argument("--disable-notifications")
options.add_argument("--disable-popup-blocking")
# 新增强化参数
options.add_argument("--disable-infobars")  # 禁用"Chrome受自动控制"提示
options.add_argument("--disable-extensions")  # 禁用浏览器扩展，避免扩展弹窗
options.add_argument("--start-maximized")  # 最大化窗口，减少因窗口尺寸触发的弹窗
options.add_argument("--no-default-browser-check")  # 跳过默认浏览器检查弹窗
options.add_argument("--disable-blink-features=AutomationControlled")  # 避免被检测为自动化工具
options.add_argument("--disable-features=VizDisplayCompositor")  # 禁用可能触发弹窗的渲染特性

二、自动处理JavaScript弹窗（Alert/Confirm/Prompt） #

这类浏览器级别的JS弹窗，可通过Selenium的预期条件自动检测并处理：

from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

def handle_js_popup(driver, timeout=3):
    try:
        # 等待弹窗出现（最多等待3秒）
        alert = WebDriverWait(driver, timeout).until(EC.alert_is_present())
        alert.accept()  # 接受弹窗，需取消则改用alert.dismiss()
    except:
        pass  # 无弹窗则跳过

可在页面跳转、元素点击等操作前后调用该函数，或嵌入循环逻辑中。

三、处理网页DOM类弹窗（自定义弹窗） #

这类弹窗是页面内的HTML元素（如遮罩层、弹窗容器），无固定定位信息时，可通过通用特征识别关闭：

def handle_dom_popup(driver, timeout=3):
    try:
        WebDriverWait(driver, timeout).until(lambda d: d.execute_script("""
            // 筛选固定/绝对定位的元素（通常是弹窗容器）
            return document.querySelectorAll('div[style*="position: fixed"], div[style*="position: absolute"]').length > 0;
        """))
        # 执行JS自动点击弹窗内的关闭按钮
        driver.execute_script("""
            const popups = document.querySelectorAll('div[style*="position: fixed"], div[style*="position: absolute"]');
            popups.forEach(popup => {
                // 匹配常见关闭按钮特征：含×/关闭文本、class带close/cancel、aria-label为关闭的元素
                const closeBtn = popup.querySelector('button:contains("×"), button:contains("关闭"), .close, .cancel, [aria-label="关闭"]');
                if (closeBtn) closeBtn.click();
            });
        """)
    except:
        pass

# 处理iframe内的弹窗
def handle_iframe_popups(driver):
    for iframe in driver.find_elements_by_tag_name('iframe'):
        try:
            driver.switch_to.frame(iframe)
            handle_dom_popup(driver, timeout=1)
            driver.switch_to.default_content()
        except:
            driver.switch_to.default_content()
            continue

四、全局异常捕获与重试 #

弹窗常导致ElementClickInterceptedException（点击被拦截）、NoSuchElementException（元素被遮挡），给核心操作套一层异常处理，遇到报错先清理弹窗再重试：

from selenium.common.exceptions import ElementClickInterceptedException, NoSuchElementException

def safe_operation(driver, operation, max_retries=3):
    retries = 0
    while retries < max_retries:
        try:
            return operation()  # 传入要执行的操作，比如lambda: driver.find_element_by_id('btn').click()
        except (ElementClickInterceptedException, NoSuchElementException):
            # 先处理所有可能的弹窗
            handle_js_popup(driver)
            handle_dom_popup(driver)
            handle_iframe_popups(driver)
            retries += 1
    raise Exception(f"重试{max_retries}次仍未成功")

使用示例：

# 安全点击目标按钮
safe_operation(driver, lambda: driver.find_element_by_xpath('//*[@id="target-btn"]').click())

五、后台线程定时监控弹窗 #

若程序需全天候运行，可启动后台线程，每隔几秒自动检查并处理弹窗：

import threading
import time

def popup_monitor(driver, interval=5):
    while True:
        handle_js_popup(driver)
        handle_dom_popup(driver)
        handle_iframe_popups(driver)
        time.sleep(interval)

# 启动监控（设为守护线程，主程序退出时自动终止）
monitor_thread = threading.Thread(target=popup_monitor, args=(driver,), daemon=True)
monitor_thread.start()

内容的提问来源于stack exchange，提问作者PacalosPizza