如何在Colab中运行undetected-chromedriver？连接错误求解决

我需要编写一个每日检查Surfline（https://www.surfline.com）冲浪条件的程序，本地使用无头模式的undetected-chromedriver（uc）可以绕过网站安全检测，但在Colab中运行时出现连接错误。

现有代码 #

!apt-get update
!pip install selenium
!pip install undetected-chromedriver
!apt-get install chromium-browser chromium-chromedriver
!apt-get upgrade

from selenium import webdriver
import undetected_chromedriver as uc

options = webdriver.ChromeOptions()
options.add_argument('--no-sandbox')
options.add_argument('--headless')

driver = uc.Chrome(options=options)

driver.get("https://surfline.com")
print(driver.page_source)

driver.quit()

错误信息 #

WebDriverException: Message: unknown error: cannot connect to chrome at 127.0.0.1:47329
from chrome not reachable

我已经尝试过GitHub上相关issue的解决方案，但均无效，现寻求可行的解决办法，或推荐替代运行平台。

解决办法 #

针对Colab的环境特性，调整配置和参数可以解决连接问题：

1. 优化依赖安装命令 #

先确保Chrome和Chromedriver正确安装，避免不必要的升级导致版本不匹配：

!apt-get update
!apt-get install -y chromium-browser chromium-chromedriver
!pip install selenium undetected-chromedriver

2. 修改Python代码配置 #

添加必要的Chrome参数，并指定Chromedriver路径，适配Colab环境：

import undetected_chromedriver as uc
from selenium.webdriver.chrome.options import Options

options = Options()
# 适配Colab环境的核心参数
options.add_argument('--no-sandbox')
options.add_argument('--headless=new')  # 新版无头模式，兼容性更强，避免检测
options.add_argument('--disable-dev-shm-usage')  # 解决Colab共享内存不足问题
options.add_argument('--disable-gpu')
options.add_argument('--window-size=1920x1080')  # 设置窗口尺寸，避免页面布局异常

# 指定Colab中Chromedriver的绝对路径
driver = uc.Chrome(
    options=options,
    driver_executable_path='/usr/lib/chromium-browser/chromedriver'
)

try:
    driver.get("https://www.surfline.com")
    print(driver.title)  # 验证页面是否加载成功
    # 后续可添加冲浪条件提取逻辑
finally:
    driver.quit()

关键调整说明 #

• --headless=new：Chrome 112+版本推荐的无头模式，相比旧版--headless，更接近真实浏览器环境，降低被检测概率，同时避免连接异常
• --disable-dev-shm-usage：Colab默认/dev/shm空间极小，会导致Chrome启动崩溃，此参数让Chrome使用临时文件替代共享内存
• 指定driver_executable_path：确保undetected-chromedriver使用Colab官方安装的Chromedriver，避免版本不匹配引发的连接问题

替代平台推荐 #

如果Colab仍无法稳定运行，可考虑以下平台：

• Replit：支持无头浏览器运行，环境配置灵活，免费版足够支撑每日定时任务，无需复杂的环境配置
• AWS Lambda：配合Selenium Layers部署，适合无服务器定时触发任务，按需付费成本低
• 本地服务器/树莓派：长期运行稳定可控，不受云平台环境限制，适合需要持续执行的脚本

内容的提问来源于stack exchange，提问作者Matt Newell