Docker Selenium容器中Headless Chrome部分网站无法访问问题求助

常见原因及对应解决方案 #

1. 缺少Docker环境下Headless Chrome的必要参数 #

Docker容器的沙箱环境和资源限制会导致Chrome访问异常，加上部分网站会拦截默认的Headless请求，补充以下参数即可：

• --no-sandbox：禁用Chrome沙箱（Docker容器内无完整沙箱环境，必须添加）
• --disable-dev-shm-usage：解决容器内/dev/shm空间不足导致的崩溃或加载失败
• --user-agent：模拟正常浏览器的用户代理，避免被网站识别为Headless爬虫
• --disable-blink-features=AutomationControlled：禁用自动化标识，绕过网站对navigator.webdriver的检测

示例完整命令：

google-chrome --headless --disable-gpu --dump-dom --no-sandbox --disable-dev-shm-usage --user-agent="Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/118.0.0.0 Safari/537.36" --disable-blink-features=AutomationControlled https://目标网站.com

2. 证书信任问题 #

部分网站使用自定义CA证书，容器内的Chrome默认未信任这些证书，可按以下步骤处理：

1. 将证书文件复制到容器内的/usr/share/ca-certificates/目录
2. 执行update-ca-certificates命令更新系统证书库
3. 重启Chrome命令尝试访问

3. DNS解析差异 #

虽然curl能正常访问，但Chrome可能采用了不同的DNS解析逻辑，可在启动Docker容器时指定DNS服务器：

docker run --dns=8.8.8.8 [其他容器参数] selenium/standalone-chrome

4. 资源加载限制 #

部分网站依赖图片、CSS等资源完成页面渲染，Headless模式默认可能禁用了部分资源加载，可添加参数强制启用：

• --blink-settings=imagesEnabled=true：允许加载图片
• --disable-web-security：绕过跨域限制（仅用于测试，生产环境不建议）

内容的提问来源于stack exchange，提问作者Dev