PHP Curl模拟Endomondo浏览器请求遇403错误求助

这种情况大概率是Endomondo的服务器启用了反爬机制，一眼就识别出你的请求不是来自真实浏览器导致的。浏览器能正常访问，是因为它会自动发送一堆服务器期望的请求头，而PHP Curl默认配置太“朴素”，很容易被拦截。试试下面这些调整：

• 模拟真实浏览器的User-Agent
  服务器首先会检查这个字段，Curl默认的UA是类似curl/7.68.0的标识，一眼就能看出不是浏览器。你可以复制自己浏览器的UA（比如Chrome的UA）设置进去：

  curl_setopt($ch, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/118.0.0.0 Safari/537.36');
  

• 添加浏览器常用的请求头
  除了UA，浏览器还会发送Accept、Accept-Language、Accept-Encoding等头信息，这些能让你的请求更“逼真”：

  $headers = [
      'Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8',
      'Accept-Language: da-DK,da;q=0.8,en-US;q=0.5,en;q=0.3',
      'Accept-Encoding: gzip, deflate, br',
      'Connection: keep-alive',
      'Upgrade-Insecure-Requests: 1'
  ];
  curl_setopt($ch, CURLOPT_HTTPHEADER, $headers);
  

• 启用Cookie处理（即使初始为空）
  你提到已经清除了Cookie，但有些服务器会要求请求方支持Cookie存储（哪怕一开始没有Cookie），可以设置Cookie的存储路径来让Curl处理Cookie：

  curl_setopt($ch, CURLOPT_COOKIEJAR, '/tmp/cookies.txt');
  curl_setopt($ch, CURLOPT_COOKIEFILE, '/tmp/cookies.txt');
  

  注意要确保服务器上的/tmp目录有读写权限。

• 允许跟随重定向
  有时候服务器会先返回3xx重定向，再返回200，Curl默认不会自动跟随，开启这个选项：

  curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true);
  

• 添加Referer头（可选）
  部分网站会检查请求的来源页面，你可以设置Referer为Endomondo的主域名：

  curl_setopt($ch, CURLOPT_REFERER, 'https://www.endomondo.com/');
  

把这些配置整合到你的Curl代码里，完整示例大概是这样：

$url = 'https://www.endomondo.com/embed/user/workouts/?id=747232&measure=0&width=450&height=400&page=0&language=DA';

$ch = curl_init($url);

// 基础配置
curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, false); // 生产环境建议开启，测试时可以暂时关闭

// 模拟浏览器的核心配置
curl_setopt($ch, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/118.0.0.0 Safari/537.36');
$headers = [
    'Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8',
    'Accept-Language: da-DK,da;q=0.8,en-US;q=0.5,en;q=0.3',
    'Accept-Encoding: gzip, deflate, br',
    'Connection: keep-alive',
    'Upgrade-Insecure-Requests: 1'
];
curl_setopt($ch, CURLOPT_HTTPHEADER, $headers);
curl_setopt($ch, CURLOPT_COOKIEJAR, '/tmp/cookies.txt');
curl_setopt($ch, CURLOPT_COOKIEFILE, '/tmp/cookies.txt');
curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true);
curl_setopt($ch, CURLOPT_REFERER, 'https://www.endomondo.com/');

$response = curl_exec($ch);
$httpCode = curl_getinfo($ch, CURLINFO_HTTP_CODE);

if ($httpCode == 200) {
    echo $response;
} else {
    echo "请求失败，状态码：" . $httpCode;
}

curl_close($ch);

如果还是不行，可能服务器还有更严格的验证（比如JS渲染验证），那你可能需要用像Puppeteer这样的工具来模拟真正的浏览器行为，但先试试上面的配置，大部分反爬场景都能解决。

内容的提问来源于stack exchange，提问作者kWalk