Python3.12中Selenium未找到元素时Logger失效问题求助

问题描述 #

在Python 3.12环境下使用Selenium WebDriver时，遇到以下异常捕获相关问题：

• 当WebDriver找不到指定XPath元素时，第一段代码捕获到no such element异常但程序崩溃；
• 第二段代码用f-string格式化日志内容时，Try-Except异常捕获和Logger均失效，仍抛出相同异常；
• 第三段代码未使用f-string则正常工作，Logger可正常记录日志。

代码示例 #

第一段代码（程序崩溃） #

try:
   driver.find_element(By.XPATH, "//span[contains(.,'some_text')]").get_attribute('innerHTML')
except Exception as e:
   logger.exception('Error into get_time_sale(), no such element')

第二段代码（Try-Except与Logger均失效） #

try:
   driver.find_element(By.XPATH, "//span[contains(.,'some_text')]").get_attribute('innerHTML')
except Exception as e:
  logger.error(f'Error into get_time_sale(), no such element: {e}')

第三段代码（正常工作） #

try:
   driver.find_element(By.XPATH, "//span[contains(.,'some_text')]").get_attribute('innerHTML')
except Exception as e:
   logger.error('Error into get_time_sale(), no such element')

原因分析 #

1. 第一段代码崩溃原因
   logger.exception()会自动捕获当前异常栈并记录，但如果Logger配置存在问题（如日志级别未正确设置、输出路径无写入权限、Handler初始化失败等），记录日志的过程中会抛出新的异常，而这个新异常不在外层try-except的捕获范围内，最终导致程序崩溃。此外也可能是捕获异常后，后续代码存在未处理的逻辑错误。

2. 第二段代码捕获失效原因
   核心问题出在f-string格式化{e}时触发了新异常。Selenium的NoSuchElementException对象在执行str(e)（f-string会自动调用该方法）时，内部可能会访问已失效的WebDriver上下文属性（如元素定位的上下文已被销毁），导致在except块内抛出新异常。由于这个新异常不在外层try的覆盖范围内，会直接绕过当前的except处理，看起来像是捕获失效。

3. 第三段代码正常工作原因
   这段代码没有访问异常对象e，except块内的日志记录逻辑不会触发额外异常，Logger可以正常执行，且没有新异常破坏流程。

解决方案 #

1. 修复第一段代码的崩溃问题 #

• 检查Logger配置：确认日志级别至少为ERROR、输出目录有写入权限、Handler（如FileHandler/StreamHandler）初始化正常；
• 在except块内增加二次异常捕获，避免日志记录时的异常导致程序崩溃：

try:
    driver.find_element(By.XPATH, "//span[contains(.,'some_text')]").get_attribute('innerHTML')
except Exception as e:
    try:
        logger.exception('Error into get_time_sale(), no such element')
    except Exception as log_err:
        print(f"Failed to log error: {log_err}, original error: {e}")

2. 修复第二段代码的f-string异常问题 #

避免直接在f-string中引用异常对象e，改用Logger自带的参数传递方式（支持自动格式化异常信息）：

try:
    driver.find_element(By.XPATH, "//span[contains(.,'some_text')]").get_attribute('innerHTML')
except Exception as e:
    logger.error('Error into get_time_sale(), no such element: %s', e)

或者先安全获取异常信息再格式化：

try:
    driver.find_element(By.XPATH, "//span[contains(.,'some_text')]").get_attribute('innerHTML')
except Exception as e:
    err_msg = str(e) if isinstance(e, Exception) else "Unknown error"
    logger.error(f'Error into get_time_sale(), no such element: {err_msg}')

3. 通用优化建议 #

• 捕获更具体的异常类型：不要直接捕获Exception，而是捕获Selenium的NoSuchElementException，避免捕获无关异常：

from selenium.common.exceptions import NoSuchElementException

try:
    driver.find_element(By.XPATH, "//span[contains(.,'some_text')]").get_attribute('innerHTML')
except NoSuchElementException as e:
    logger.error('Error into get_time_sale(), no such element: %s', e)

• 确保页面加载完成：使用WebDriverWait等待元素出现，减少元素找不到的场景：

from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

try:
    element = WebDriverWait(driver, 10).until(
        EC.presence_of_element_located((By.XPATH, "//span[contains(.,'some_text')]"))
    )
    element.get_attribute('innerHTML')
except NoSuchElementException as e:
    logger.error('Error into get_time_sale(), no such element: %s', e)

内容的提问来源于stack exchange，提问作者Viktor Katelevskij