如何通过Selenium与Python实现登录提交请求？提交失败排查

先看你提供的登录代码：

from selenium import webdriver
browser = webdriver.Chrome()
browser.get('https://courses.edx.org/login')
email = browser.find_element_by_id('login-email')
email.send_keys('xxxxx@gmail.com')
pwd = browser.find_element_by_id('login-password')
pwd.send_keys('password')
login_attempt = browser.find_element_by_xpath('//*[@id="login"]/button')
login_attempt.submit()

我帮你梳理几个大概率导致提交失败的原因，以及对应的解决办法：

1. 用submit()不如直接调用click()更可靠 #

submit()方法是针对表单元素的操作，它会尝试提交当前元素所在的表单。但如果你的登录按钮本身不是表单的直接子元素，或者页面的表单结构比较复杂，这个方法可能不会触发预期的提交行为。

直接点击登录按钮是更稳妥的方式，把最后一行改成：

login_attempt.click()

2. 缺少显式等待，元素还没加载完成就操作 #

EdX的登录页面可能有异步加载的内容，你直接用find_element_by_*可能会在元素未完全渲染时就执行操作，导致元素定位失败或者点击/提交无效。

建议添加显式等待，确保元素可交互后再操作：

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

browser = webdriver.Chrome()
browser.get('https://courses.edx.org/login')

# 等待邮箱输入框可交互
email = WebDriverWait(browser, 10).until(
    EC.element_to_be_clickable((By.ID, 'login-email'))
)
email.send_keys('xxxxx@gmail.com')

# 等待密码输入框可交互
pwd = WebDriverWait(browser, 10).until(
    EC.element_to_be_clickable((By.ID, 'login-password'))
)
pwd.send_keys('password')

# 等待登录按钮可点击后再点击
login_attempt = WebDriverWait(browser, 10).until(
    EC.element_to_be_clickable((By.XPATH, '//*[@id="login"]/button'))
)
login_attempt.click()

3. 反爬机制拦截了自动化请求 #

EdX可能会检测到Selenium的自动化特征（比如ChromeDriver的标识），导致页面没有正常响应。你可以给ChromeDriver添加一些配置，模拟真实浏览器的行为：

from selenium import webdriver
from selenium.webdriver.chrome.options import Options

options = Options()
# 禁用自动化提示
options.add_experimental_option("excludeSwitches", ["enable-automation"])
options.add_experimental_option('useAutomationExtension', False)
# 模拟普通用户的User-Agent
options.add_argument("user-agent=Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/114.0.0.0 Safari/537.36")

browser = webdriver.Chrome(options=options)
browser.get('https://courses.edx.org/login')

# 后续的输入和点击操作同上...

4. 检查是否有隐藏的验证步骤 #

有时候登录页面会有隐性的验证（比如输入邮箱后需要等待页面加载完成某些验证脚本，或者有隐藏的字段需要填充），你可以在输入邮箱和密码后，加一个短暂的等待，确保页面状态稳定：

import time

# 输入邮箱和密码后
time.sleep(2)  # 等待2秒，让页面完成验证或渲染
login_attempt.click()

你可以先从替换submit()为click()开始测试，这是最常见的问题点。如果还是不行，再逐步添加等待和反爬配置。

内容的提问来源于stack exchange，提问作者Sakim