如何将Selenium+Chrome代码转为PhantomJS？切换后遇元素找不到异常

嘿，我碰到过好多次Chrome跑的顺顺当当，切到PhantomJS就报NoSuchElementException的情况，这种问题在PhantomJS里真的挺常见的，给你梳理几个靠谱的排查方向和解决办法：

1. 先调整PhantomJS的窗口大小 #

PhantomJS默认的窗口尺寸小得离谱，很多网站会根据窗口大小调整布局，你要找的元素可能因为窗口太小被挤到看不见的地方，根本没渲染出来。赶紧把窗口调大试试：

from selenium import webdriver

driver = webdriver.PhantomJS()
driver.set_window_size(1920, 1080)  # 直接设成桌面常用的分辨率
driver.get("你的目标网页地址")

2. 给页面留足加载时间，用显式等待 #

Chrome可能自带了一些隐性的加载等待，或者本身渲染速度快，元素很快就出来了，但PhantomJS处理动态内容的速度慢很多。试试用WebDriverWait显式等元素加载完成：

from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
from selenium.webdriver.common.by import By

# 最多等10秒，直到目标元素出现
wait = WebDriverWait(driver, 10)
target_element = wait.until(EC.presence_of_element_located((By.XPATH, "//div[@class='wzrkPPwarp']//a")))

嫌麻烦的话，也可以给整个driver设置全局隐式等待，找不到元素时自动等一会儿：

driver.implicitly_wait(10)  # 全局等待10秒，所有元素查找都会生效

3. 模拟Chrome的User-Agent，避免页面渲染差异 #

有些网站会根据User-Agent判断访问设备，PhantomJS的默认UA一看就是爬虫，可能返回的页面结构和Chrome完全不一样。你可以把UA改成Chrome的：

from selenium import webdriver

desired_capabilities = webdriver.DesiredCapabilities.PHANTOMJS.copy()
# 这里用的是Chrome新版的UA，你也可以换成你本地Chrome的UA
desired_capabilities['phantomjs.page.settings.userAgent'] = 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/118.0.0.0 Safari/537.36'

driver = webdriver.PhantomJS(desired_capabilities=desired_capabilities)

4. 考虑换掉PhantomJS（最关键的建议） #

说句实在话，PhantomJS已经停止维护好几年了，对现代网站的JavaScript和CSS支持烂得一批，很多新特性它根本处理不了。如果上面的方法都没用，真心建议你换成Headless Chrome或者Headless Firefox，它们是主流浏览器的无头模式，兼容性强太多了。比如Headless Chrome的用法：

from selenium import webdriver
from selenium.webdriver.chrome.options import Options

options = Options()
options.add_argument('--headless=new')  # 新版Headless模式，更接近真实Chrome
options.add_argument('--disable-gpu')
options.add_argument('--window-size=1920,1080')

driver = webdriver.Chrome(options=options)

最后，你可以先打印PhantomJS加载的页面源码，看看里面到底有没有你要找的元素：

print(driver.page_source)

要是源码里都没有这个元素，那要么是页面没加载对，要么是网站反爬了；要是源码里有，那就是等待或者xpath的问题。

内容的提问来源于stack exchange，提问作者Thedeadman619