Python网络爬虫项目返回空括号,求助排查原因
问题排查与代码示例
- 推测问题源于目标网站要求登录,已通过cURL converter获取cookies与header信息
- 考虑过Python版本过时问题,已安装最新版本并新建项目
- 确认已通过
pip安装lxml、bs4和requests库
代码示例
from bs4 import BeautifulSoup import requests html_text = requests.get('https://newsfilter.io/latest/news', cookies=cookies, headers=headers).text soup = BeautifulSoup(html_text, 'lxml') jobs = soup.find_all('div', class_='sc-dnqmqq bxsfdc') print(jobs)
内容的提问来源于stack exchange,提问作者noah g
相关产品推荐
相关产品推荐

