如何通过Selenium或HttpClient获取iframe内嵌共享单车站点坐标？

一、使用Selenium实现 #

Selenium能模拟完整浏览器行为，适配iframe嵌套的动态渲染场景：

• 步骤1：启动浏览器访问目标页面，等待主页面加载完成
• 步骤2：定位iframe[src*='looker.com/embed/']元素，调用switch_to.frame()切换到该iframe上下文
• 步骤3：用WebDriverWait等显式等待方法，等待地图组件加载完毕（比如等待站点标记元素出现、或相关网络请求完成）
• 步骤4：两种提取坐标的方式：
  • 解析DOM：查找地图上的站点标记元素，提取其携带坐标的属性（如data-lat、data-lng，或样式内的定位参数）
  • 捕获网络请求：通过Selenium的网络日志功能，过滤Looker相关API请求，找到返回站点数据的接口，解析响应JSON中的坐标字段

二、使用HttpClient实现 #

该方式需手动分析网络请求链路，效率更高但细节处理较多：

• 步骤1：从主页面HTML中提取iframe的完整src值，得到Looker嵌入页面的真实URL
• 步骤2：模拟浏览器请求该嵌入页面，需携带主页面的Cookie、User-Agent等请求头（Looker嵌入可能依赖原站点的会话认证）
• 步骤3：通过浏览器开发者工具的Network面板提前分析，找到嵌入页面加载时返回站点列表及坐标的API接口
• 步骤4：直接请求该API接口，带上必要的认证参数（如token、Cookie），解析响应数据中的坐标字段

注意事项 #

• Looker嵌入页面可能存在反爬机制，比如验证请求来源、会话有效期，需保证请求头和Cookie与浏览器一致
• 若站点坐标通过WebGL渲染而非DOM元素展示，Selenium无法直接从DOM提取，只能通过捕获网络请求获取数据

内容的提问来源于stack exchange，提问作者barney stinson 2