如何索引由另一TYPO3实例托管的外部URL？

这个需求完全可行，外部URL不需要与内部URL由同一TYPO3实例托管。你之前配置失败大概率是细节处理不到位，以下是关键排查和解决方向：

• 确认.htaccess重写逻辑：主实例的重写规则必须确保/subdir路径的请求能完整转发到外部TYPO3实例，不能在主实例层面被拦截或篡改请求路径，否则索引爬虫无法获取到目标页面的真实内容。
• 调整Indexed Search外部索引配置：
  • 在主实例的Indexed Search配置中，将https://example.com/subdir设为外部索引目标，并开启子页面递归索引。
  • 检查爬虫的请求标识（如User-Agent），避免被外部实例的安全插件拦截。如果外部实例有访问限制，需配置爬虫的认证信息（比如Basic Auth）。
• 验证网络可访问性：从主服务器所在的网络环境，直接请求https://example.com/subdir及其子页面，确认能正常返回页面HTML内容，排除防火墙、CDN、TYPO3 IP白名单等阻挡因素。
• 检查外部实例的索引权限：确保外部实例的页面没有设置noindex meta标签，且TYPO3的config.index_enable配置为开启状态，允许爬虫抓取内容。

内容的提问来源于stack exchange，提问作者twigmac