使用Python BS4无法定位指定div的问题求助
问题原因分析与解决办法
嘿,这个问题其实很好解决,核心原因和几个细节我帮你理清楚:
1. 直接触发错误的元凶:方法名拼写错误
你遇到的 TypeError: 'NoneType' object is not callable,本质是BeautifulSoup的查找方法名写错了:你写的是 findall(),但正确的方法名是 find_all()(中间有个下划线)。
因为BeautifulSoup里根本没有叫 findall 的方法,所以调用 soup.findall() 会返回 None,而你接着把这个 None 当成可调用的函数去循环使用,自然就抛出了这个错误。
2. 为什么打印soup能看到目标div?
当你直接打印 soup 时,输出的是整个解析后的HTML文档结构,目标div确实在里面,但这和你调用错误的方法是两码事——方法名写错导致你根本没执行正确的查找逻辑,所以哪怕div存在,也找不到。
3. 修正后的代码
把方法名改成 find_all() 就可以正常工作了:
site = 'https://www.edsurge.com/product-reviews/curriculum-products/math' soup = bs.BeautifulSoup(urlopen(site),"html5lib") # 注意这里是find_all,不是findall for div in soup.find_all('div', class_='browse-main p1'): print(div)
额外小提示
如果修正后还是找不到目标内容,那才需要考虑页面是否是JavaScript动态加载的,但你说打印soup能看到div,说明这部分是静态返回的HTML,所以修正方法名后应该就能顺利定位到了。
内容的提问来源于stack exchange,提问作者VincFort
相关产品推荐
相关产品推荐

