Google已索引带?SD/?SA的无效URL，咨询收录原因

• 爬虫的参数探索行为：Google爬虫会主动尝试URL的各种变体，包括添加随机参数。如果你的网站存在动态参数使用的历史，或者爬虫判定这类参数可能返回差异化内容，就会抓取这类带?SD/?SA的无效URL。
• 外部来源的错误链接：可能是第三方网站误链到了这类错误地址，或是一些非正规爬虫、工具生成并传播了这类带参数的URL，Google通过这些外链发现并纳入收录队列。
• 网站内部的遗留痕迹：比如开发阶段的测试链接、CMS生成的临时参数、编辑器缓存目录（像示例里的_notes/路径），这些内部遗留的痕迹被爬虫抓取后，衍生出带参数的变体URL。
• 错误页的状态码问题：如果你把这些无效URL指向自定义错误页，但返回的是200 OK状态码而非404 Not Found，Google会判定这是有效页面，持续进行收录。

内容的提问来源于stack exchange，提问作者projectmonkey