如何阻止AWS EC2公网IP地址出现在Google搜索结果中？

以下是几种精准解决问题的方法，既能保留域名站点的索引，又能屏蔽IP地址对应的搜索结果：

1. 动态输出noindex指令（核心方案） #

通过识别请求的主机头，仅在爬虫或用户访问IP地址（my.public.ip.amazonaws.com）时，添加禁止索引的标签，域名访问时正常输出内容。

• PHP 实现：在页面的<head>区域插入逻辑：

  <?php
  $requestHost = $_SERVER['HTTP_HOST'];
  if ($requestHost === 'my.public.ip.amazonaws.com') {
      echo '<meta name="robots" content="noindex, nofollow">';
  }
  ?>
  

• Nginx 配置：单独为IP站点添加响应头：

  server {
      listen 80;
      server_name my.public.ip.amazonaws.com;
      add_header X-Robots-Tag "noindex, nofollow";
      # 保留原有反向代理/站点配置
  }
  

• Apache .htaccess 配置：

  <If "%{HTTP_HOST} == 'my.public.ip.amazonaws.com'">
      Header set X-Robots-Tag "noindex, nofollow"
  </If>
  

2. 优化robots.txt配合首选域名声明 #

修改站点根目录的robots.txt，明确指定搜索引擎的首选域，并禁止IP路径的爬取：

User-agent: *
Disallow: /
Host: mydomain.com

Host指令会告知Google你的官方站点域名，配合上面的noindex指令，双重阻断IP站点的索引。

3. 借助Google Search Console手动干预 #

1. 同时添加mydomain.com和my.public.ip.amazonaws.com两个站点到Search Console；
2. 在域名站点的设置中，指定首选域为mydomain.com；
3. 进入IP站点的「索引 > 移除URL」页面，提交IP相关的所有URL请求移除索引。

4. 配置301重定向（可选但推荐） #

如果希望用户访问IP地址时自动跳转到域名，同时传递权重，可以配置永久重定向：
Nginx示例：

server {
    listen 80;
    server_name my.public.ip.amazonaws.com;
    return 301 https://mydomain.com$request_uri;
}

这样既解决了用户访问的混淆问题，也能让搜索引擎将IP站点的权重转移到域名站点。

内容的提问来源于stack exchange，提问作者Hayden S.