Flask结合Python Selenium复用Chrome窗口及多请求处理咨询

一、保持Chrome窗口常开，避免重复启动耗时 #

核心思路是预先启动Chrome并开启远程调试模式，让Selenium连接已运行的浏览器实例，而非每次请求都重新启动Chrome，彻底解决初始化耗时问题。

1. 预先启动Chrome（命令行） #

根据你的操作系统执行对应命令（需调整Chrome安装路径和配置文件目录）：

# Windows示例
"C:\Program Files\Google\Chrome\Application\chrome.exe" --remote-debugging-port=9222 --user-data-dir="C:\selenium\ChromeProfile"

# macOS示例
/Applications/Google\ Chrome.app/Contents/MacOS/Google\ Chrome --remote-debugging-port=9222 --user-data-dir="/Users/xxx/selenium/ChromeProfile"

# Linux示例
google-chrome --remote-debugging-port=9222 --user-data-dir="/home/xxx/selenium/ChromeProfile"

• --remote-debugging-port=9222：指定远程调试端口，后续Selenium通过该端口连接已启动的Chrome
• --user-data-dir：指定浏览器配置文件目录，保存会话状态（如登录态、缓存），避免每次重启重置环境

2. Selenium连接已启动的Chrome #

替换原有webdriver.Chrome()初始化代码，改为连接已运行的实例：

from selenium import webdriver
from selenium.webdriver.chrome.options import Options

def get_chrome_driver():
    chrome_options = Options()
    chrome_options.add_experimental_option("debuggerAddress", "127.0.0.1:9222")
    driver = webdriver.Chrome(options=chrome_options)
    return driver

此后每次调用get_chrome_driver()都会复用已有的Chrome窗口，无需重新启动浏览器。

二、处理多请求并发问题 #

单个Chrome实例是单线程的，同一时间只能执行一个操作（无法同时创建账号和获取详情），针对5个同时到来的请求，有两种可行方案：

方案1：请求排队（单实例串行处理） #

用线程锁让请求排队，依次使用同一个Chrome实例处理，适合请求量不大、并发要求不高的场景：

from flask import Flask, request
from selenium.webdriver.common.by import By
import threading

app = Flask(__name__)
# 线程锁：保证同一时间只有一个请求操作Chrome
driver_lock = threading.Lock()
# 预先初始化一次driver，后续复用
driver = get_chrome_driver()

# 示例1：创建Facebook账号
def fb_create():
    driver.get("https://www.facebook.com/reg")
    # 填写账号信息逻辑（示例）
    driver.find_element(By.NAME, "firstname").send_keys("Test")
    driver.find_element(By.NAME, "lastname").send_keys("User")
    # ... 其他创建步骤
    return "账号创建完成"

# 示例2：获取Facebook账号详情
def fb_get_details():
    driver.get("https://www.facebook.com/settings")
    # 提取详情逻辑（示例）
    username = driver.find_element(By.CSS_SELECTOR, "._1vp5").text
    email = driver.find_element(By.CSS_SELECTOR, "._1vp5+ ._1vp5").text
    return {"username": username, "email": email}

@app.route("/create-fb", methods=["POST"])
def create_fb_account():
    with driver_lock:
        result = fb_create()
    return result

@app.route("/get-fb-details", methods=["GET"])
def get_fb_details():
    with driver_lock:
        result = fb_get_details()
    return result

if __name__ == "__main__":
    # Flask默认多线程模式，配合锁实现串行处理
    app.run(threaded=True)

• 所有请求排队执行，先到先处理，避免多请求同时操作导致页面崩溃、元素定位混乱

方案2：浏览器实例池（多实例并行处理） #

如果需要更高并发能力，可维护一个Chrome实例池，每个请求分配空闲实例，处理完成后放回，适合请求量较大、响应速度要求高的场景：

from flask import Flask, request
from selenium.webdriver.common.by import By
from queue import Queue

app = Flask(__name__)
# 初始化浏览器实例池（示例创建3个实例，可根据服务器配置调整）
driver_pool = Queue(maxsize=3)

def init_driver_pool():
    for _ in range(3):
        driver = get_chrome_driver()
        driver_pool.put(driver)

init_driver_pool()

@app.route("/create-fb", methods=["POST"])
def create_fb_account():
    # 从池内获取空闲driver
    driver = driver_pool.get()
    try:
        driver.get("https://www.facebook.com/reg")
        # ... 账号创建操作
        return "账号创建完成"
    finally:
        # 操作完成后将driver放回池内
        driver_pool.put(driver)

# 同理实现/get-fb-details接口逻辑

• 可根据并发量调整池的大小，注意Chrome实例过多会占用大量内存，需结合服务器配置合理设置

三、注意事项 #

• Chrome远程调试模式开启后，不要手动关闭浏览器窗口，否则Selenium无法连接
• 若需长期运行，建议用进程管理工具（如systemd、supervisord）保证Chrome进程不意外退出
• 定期清理Chrome缓存和配置文件，避免内存占用过高
• Facebook有反爬机制，频繁自动化操作可能导致账号被封，建议添加合理的等待时间、随机操作间隔，避免触发检测

内容的提问来源于stack exchange，提问作者Dave Cruise