使用PuPHPEteer抓取网页：点击Load More及元素匹配问题求助

1. 解决click方法报错的问题 #

$page->click()方法仅支持CSS选择器，不接受XPath语法，直接传入//div[contains(., 'Load More')]会触发语法错误。要通过XPath定位元素并点击，需先获取元素对象再调用点击方法。

2. 精准定位外层绑定事件的div #

你用XPath匹配到8个元素，是因为嵌套的子div也包含"Load More"文本。可以通过优化XPath筛选出最外层的目标div（即没有子div包含该文本的元素）：

// 定位最外层的Load More按钮（排除嵌套子div）
$loadMoreBtn = $page->querySelectorXpath("//div[contains(., 'Load More') and not(.//div[contains(., 'Load More')])]");

if ($loadMoreBtn) {
    // 执行点击
    $loadMoreBtn->click();
    // 等待页面加载完成（可选，确保新内容加载完毕）
    $page->waitForNavigation(['waitUntil' => 'networkidle2']);
}

如果能找到外层div的专属class或属性，用CSS选择器会更简洁高效。比如假设外层div的class是load-more-wrapper（需根据实际页面结构确认），可直接写：

$page->click('.load-more-wrapper');

额外注意事项 #

• 如果按钮是动态渲染的，需先调用$page->waitForXpath()或$page->waitForSelector()确保元素加载完成后再点击
• 循环点击Load More时，要判断按钮是否存在（避免无限循环），比如每次点击后检查元素是否还能被定位到

内容的提问来源于stack exchange，提问作者Sanfly