使用PHP Simple HTML DOM爬取论坛帖子内容报错求助

这个错误的核心原因是：要么file_get_html($link)未成功获取目标页面（返回null/false），要么页面中不存在.view-content元素，导致find()方法返回null，后续调用text()触发致命错误。

以下是具体排查和解决步骤：

1. 验证页面是否成功获取 #

file_get_html依赖file_get_contents，可能因网络问题、URL无效、反爬机制等导致获取失败，先添加判断：

$detail_html = file_get_html($link);
// 检查页面加载状态
if (!$detail_html) {
    die("无法加载详情页面，请检查URL或网络连接: $link");
}

2. 确认目标选择器正确性 #

论坛列表页和详情页DOM结构通常不同，.view-content可能在详情页不存在：

• 打开浏览器访问帖子链接，按F12打开开发者工具，搜索.view-content确认元素是否存在
• 若选择器错误，替换为实际存在的元素选择器（比如.post-content、#article-body等）
• 临时输出页面源码，查看实际结构：

echo $detail_html; // 输出页面HTML，检查目标元素是否存在

3. 绕过简单反爬机制 #

部分论坛会拦截非浏览器请求，file_get_html默认请求头无User-Agent，易被识别为爬虫，手动添加请求头后再获取页面：

// 模拟浏览器请求头
$opts = [
    'http' => [
        'header' => "User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/118.0.0.0 Safari/537.36\r\n"
    ]
];
$context = stream_context_create($opts);
$html_content = file_get_contents($link, false, $context);
// 解析获取到的内容
$detail_html = str_get_html($html_content);

4. 增加容错处理 #

即使前面的检查都完成，仍可能出现元素不存在的情况，调用text()前先判断元素是否存在：

$content_element = $detail_html->find('.view-content', 0);
if ($content_element) {
    echo $content_element->text();
} else {
    echo "未找到帖子内容区域";
}

内容的提问来源于stack exchange，提问作者RoketMan