Python+Selenium爬取LinkedIn进入目标页后无法打印人名元素求助
问题根因
改完以下问题,就能正常提取到人名:
- 登录提交后无等待逻辑,Selenium在页面加载完成前就执行元素查找,自然拿到空列表
- 使用了Selenium4已废弃的旧版定位API,部分环境下会直接报错
- 多类名定位语法错误,类名之间带空格的写法无法被正确识别
- 原代码中实例化的ChromeOptions、空列表变量未做任何实际使用,属于冗余代码
修正后可直接运行的代码
import time from selenium import webdriver from selenium.webdriver.common.by import By from selenium.webdriver.support.ui import WebDriverWait from selenium.webdriver.support import expected_conditions as EC from webdriver_manager.chrome import ChromeDriverManager driver = webdriver.Chrome(ChromeDriverManager().install()) # 配置最长10秒的显式等待,替代固定time.sleep的不稳定写法 wait = WebDriverWait(driver, 10) target_url = "https://www.linkedin.com/uas/login?session_redirect=https%3A%2F%2Fwww%2Elinkedin%2Ecom%2Fsearch%2Fresults%2Fpeople%2F%3FcurrentCompany%3D%255B%25221252860%2522%255D%26geoUrn%3D%255B%2522103644278%2522%255D%26keywords%3Dsales%26origin%3DFACETED_SEARCH%26page%3D2&fromSignIn=true&trk=cold_join_sign_in" driver.get(target_url) time.sleep(2) # 用新版定位API匹配登录表单 username_input = wait.until(EC.presence_of_element_located((By.ID, "username"))) username_input.send_keys('Example@gmail.com') password_input = driver.find_element(By.ID, "password") password_input.send_keys('ExamplePassword') password_input.submit() # 等搜索页人名节点全部加载完成后再提取 # 多类名选择器将空格替换为.,解决原语法错误问题 name_elements = wait.until(EC.presence_of_all_elements_located((By.CSS_SELECTOR, ".name.actor-name"))) people_names = [item.text.strip() for item in name_elements] print(people_names)
补充说明
- 领英的前端元素会不定期调整,如果后续选择器失效,可通过浏览器开发者工具重新核对人名节点的类名
- 不要用过短的固定等待时间,领英搜索页的加载速度受网络环境影响较大
- 提取到的文本如果有多余换行或空白,用
strip()方法直接清洗即可
内容的提问来源于stack exchange,提问作者Void S
相关产品推荐
相关产品推荐

