Python Selenium在Colab中Rusprofile登录验证不稳定问题求助

一、优化ChromeOptions，规避网站反爬检测 #

headless模式易被网站识别，补充参数模拟真实浏览器环境：

options = webdriver.ChromeOptions()
options.add_argument('--headless=new')  # 新版headless，更接近真实浏览器行为
options.add_argument('--no-sandbox')
options.add_argument('--disable-dev-shm-usage')
options.add_argument('--disable-blink-features=AutomationControlled')  # 禁用自动化特征检测
options.add_experimental_option("excludeSwitches", ["enable-automation"])
options.add_experimental_option('useAutomationExtension', False)
options.add_argument('--user-agent=Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/114.0.0.0 Safari/537.36')  # 设置真实UA

二、精准定位元素，避免模糊选择 #

原代码中//*[@type="button"]可能匹配多个按钮，改用更精准的定位逻辑：

from selenium.webdriver.support import expected_conditions as EC

wait = WebDriverWait(wd, 10)
# 通过按钮文本或具体属性定位登录按钮，示例为俄语"Войти"（登录）
login_btn = wait.until(EC.element_to_be_clickable((By.XPATH, '//button[contains(text(), "Войти")]')))
login_btn.click()

三、完善等待逻辑，确保元素加载完成 #

针对弹窗、输入框、页面跳转全流程添加显式等待，避免网络延迟导致的元素未加载：

# 等待登录弹窗容器出现
wait.until(EC.presence_of_element_located((By.XPATH, '//div[contains(@class, "login-modal")]')))

# 等待邮箱和密码输入框可见并填写内容
email = wait.until(EC.visibility_of_element_located((By.XPATH, '//input[@type="email"]')))
password = wait.until(EC.visibility_of_element_located((By.XPATH, '//input[@type="password"]')))
email.clear()  # 清空输入框避免残留内容
email.send_keys("my-email")
password.clear()
password.send_keys("my-password")

# 等待提交按钮可点击后提交
submit_btn = wait.until(EC.element_to_be_clickable((By.XPATH, '//button[@class="btn btn-blue"]')))
submit_btn.click()

四、增强登录状态验证，多维度确认 #

单一姓名元素验证易失败，结合Cookie、URL变化等多维度判断：

from selenium.common.exceptions import TimeoutException

try:
    # 优先等待姓名元素加载，延长超时时间
    my_element = wait.until(EC.visibility_of_element_located((By.XPATH, "//span[text()='Myfirstname Mysurname']")), timeout=15)
    print("登录成功")
except TimeoutException:
    # 备选验证方案：检查登录标识Cookie或页面URL变化
    cookie_names = [cookie['name'] for cookie in wd.get_cookies()]
    if "auth_token" in cookie_names:
        print("登录成功（通过Cookie验证）")
    elif wd.current_url != "https://www.rusprofile.ru/?loggedout":
        print("登录成功（通过URL验证）")
    else:
        print("登录失败")

五、添加重试机制，应对偶发失败 #

网络波动或临时反爬策略可能导致单次登录失败，增加重试逻辑：

import time

max_retries = 3
retry_count = 0
login_success = False

while retry_count < max_retries and not login_success:
    try:
        wd.get("https://www.rusprofile.ru/?loggedout")
        
        # 执行完整登录流程（上述步骤）
        
        wait.until(EC.visibility_of_element_located((By.XPATH, "//span[text()='Myfirstname Mysurname']")), timeout=15)
        login_success = True
        print(f"登录成功，重试次数：{retry_count}")
    except Exception as e:
        retry_count += 1
        print(f"登录失败，重试次数：{retry_count}，错误：{str(e)}")
        time.sleep(3)  # 重试前等待，避免频繁请求被拦截

if not login_success:
    print("多次重试后仍登录失败，请检查凭证或网站反爬策略")

六、其他注意事项 #

• 确保Chrome与ChromeDriver版本匹配，Colab中可指定版本安装以避免兼容性问题
• 提交登录后可添加短暂等待（如time.sleep(2)）结合显式等待，确保页面完全跳转
• 若遇到验证码，需引入第三方验证码识别服务，或在Colab中通过手动输入方式处理

内容的提问来源于stack exchange，提问作者anonim