使用file_get_contents/cURL爬取特定网站失败，求解决方法

看起来你碰到了电商网站常见的JavaScript反爬验证机制——这个网站检测到你的请求并非来自真实浏览器（或者说没有执行它要求的JS验证逻辑），就返回了加密混淆的JS代码，要求客户端执行解密后才能拿到真实页面。PHP的file_get_contents或普通cURL只会静态抓取内容，不会执行JS，所以才会出现这种情况。下面给你几个可行的解决方案：

方案一：用支持JS执行的PHP工具模拟浏览器 #

这是最省心的方法，直接模拟真实浏览器的行为，自动执行JS验证，拿到处理后的真实页面。推荐用Symfony Panther或者Goutte搭配ChromeDriver：

以Symfony Panther为例，先通过Composer安装：

composer require symfony/panther

然后编写代码：

require __DIR__.'/vendor/autoload.php';

// 创建Chrome浏览器客户端
$client = \Symfony\Component\Panther\Client::createChromeClient();
// 请求目标页面
$crawler = $client->request('GET', 'https://www.ivory.co.il/catalog.php?id=14589');
// 等待JS执行完成（可以等待页面上的价格元素加载出来，比如假设价格元素ID是product-price）
$client->waitFor('#product-price');
// 输出真实的页面源码
echo $crawler->html();

这个工具会自动处理JS验证、Cookie等，和你用真实浏览器打开页面的效果一致。

方案二：手动逆向JS加密逻辑（难度高，维护成本大） #

如果你不想用模拟浏览器，可以尝试逆向分析返回的JS代码，把解密逻辑用PHP实现：

1. 先解码JS里的decodeURI字符串，你给出的那段编码后的字符串可以先还原成原始内容；
2. 分析异或解密逻辑（E1U.charCodeAt(e1U)^m1U.charCodeAt(X1U)），找到m1U的来源（可能是某个生成的密钥）；
3. 在PHP里实现同样的解密逻辑，得到真实页面的HTML，同时要提取JS生成的验证Cookie/参数，后续请求带上这些参数。

但这个方法的问题是，网站随时可能更新加密逻辑，你得跟着调整，适合有逆向经验的开发者。

方案三：寻找网站的隐藏API（最优解，如果能找到） #

很多电商网站会用XHR请求加载产品数据，你可以打开浏览器的开发者工具→Network面板，刷新页面后查看所有请求，找到获取产品价格的API接口（通常是JSON格式），直接请求这个API会比爬页面简单得多，也不容易触发反爬。

额外注意事项 #

• 不管用哪种方法，都要模拟真实用户的请求行为：设置合理的User-Agent、添加请求延迟、不要频繁请求同一页面，避免被封IP；
• 遵守网站的robots.txt协议和使用条款，不要过度爬取，避免法律风险。

内容的提问来源于stack exchange，提问作者Daniel