如何禁止/2024/03目录下的Torrent文件URL被Google索引？

方法一：修改robots.txt（最简单直接） #

直接在网站根目录的robots.txt文件中添加以下规则，精准限制搜索引擎抓取/wp-content/uploads/2024/03/目录下所有.torrent文件：

User-agent: *
Disallow: /wp-content/uploads/2024/03/*.torrent

规则生效后，搜索引擎会停止抓取这些文件，自然不会被索引。写完后可以到Google Search Console的「robots.txt测试工具」验证规则是否正确匹配目标文件。

方法二：用PHP代码添加X-Robots-Tag响应头（更灵活） #

如果需要针对这类文件直接返回「禁止索引」指令，可在WordPress主题的functions.php中添加以下代码：

function block_torrent_indexing() {
    $current_url = $_SERVER['REQUEST_URI'];
    // 匹配目标目录下的所有.torrent文件
    if (preg_match('/\/wp-content\/uploads\/2024\/03\/.*\.torrent$/i', $current_url)) {
        header('X-Robots-Tag: noindex, nofollow');
    }
}
add_action('template_redirect', 'block_torrent_indexing');

这段代码会在页面加载时检测当前请求的URL，一旦匹配到目标目录下的.torrent文件，就会向搜索引擎发送noindex和nofollow的指令，阻止其索引该文件。

额外说明 #

如果是少量文件，也可以在WordPress媒体库中批量编辑文件的可见性，设置为「不允许搜索引擎索引」，但200个文件手动操作效率太低，更推荐前面两种方法。

内容的提问来源于stack exchange，提问作者user15015903