求助：如何通过PowerShell获取URL的HTML源码及Sitescope指定页面源码

Hey there! Let's tackle your questions step by step—first the general PowerShell method for fetching HTML, then your specific SiteScope scenario.

有两种直接可用的内置命令可以实现：

• 基础方案：使用Invoke-WebRequest
  这是获取原始HTML最可靠的工具，它会返回包含响应头、内容等信息的完整对象。用法如下：

# 替换为你的目标URL
$targetUrl = "https://example.com"
# 发送请求并保存响应
$response = Invoke-WebRequest -Uri $targetUrl
# 通过Content属性获取HTML源代码
$response.Content

Content属性里就存储着你需要的原始HTML字符串。

• 替代方案：Invoke-RestMethod
  虽然这个命令主要用于处理JSON/XML这类结构化数据，但也能返回原始HTML。不过它会自动尝试解析内容，所以纯HTML场景下Invoke-WebRequest更稳妥：

$targetUrl = "https://example.com"
$htmlSource = Invoke-RestMethod -Uri $targetUrl
Write-Output $htmlSource

你的SiteScope场景涉及带嵌入凭证的URL，会从登录页自动重定向到「关于页面」——这需要处理会话持久化和可能的重定向（包括JavaScript驱动的重定向）。这里提供两种解决方案：

方案一：用会话持久化处理HTTP重定向 #

如果重定向是通过HTTP状态码（3xx系列）实现的，而非JavaScript，可以用会话变量保留登录Cookie：

# 替换为包含嵌入凭证的SiteScope私有URL
$siteScopeUrl = "YOUR_PRIVATE_SITESCOPE_URL"
# 模拟浏览器的User-Agent，避免被网站拦截
$browserHeaders = @{
    "User-Agent" = "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/118.0.0.0 Safari/537.36"
}

# 发送初始请求，将会话保存到$loginSession，禁用自动重定向
$initialResponse = Invoke-WebRequest -Uri $siteScopeUrl -Headers $browserHeaders -SessionVariable loginSession -MaximumRedirection 0 -ErrorAction SilentlyContinue

# 检查HTTP重定向并使用保存的会话跟进
if ($initialResponse.StatusCode -match "^3") {
    $redirectUrl = $initialResponse.Headers["Location"]
    # 若为重定向路径，转换为绝对URL
    if (-not $redirectUrl.StartsWith("http")) {
        $redirectUrl = [System.Uri]::new([System.Uri]$siteScopeUrl, $redirectUrl).AbsoluteUri
    }
    # 使用持久化的登录会话获取「关于页面」
    $aboutPageResponse = Invoke-WebRequest -Uri $redirectUrl -WebSession $loginSession -Headers $browserHeaders
    $aboutPageHtml = $aboutPageResponse.Content
} else {
    # 若无重定向，检查初始响应是否已是「关于页面」
    $aboutPageHtml = $initialResponse.Content
}

# 输出HTML源代码
Write-Output $aboutPageHtml

方案二：模拟真实浏览器（应对JavaScript重定向） #

如果SiteScope登录后用JavaScript实现重定向，Invoke-WebRequest无法处理（因为它不执行JS），可以用Selenium PowerShell模块模拟Chrome/IE浏览器：

1. 先安装模块（必要时以管理员身份运行PowerShell）：

Install-Module -Name Selenium -Scope CurrentUser -Force

2. 使用ChromeDriver自动化浏览器操作：

Import-Module Selenium

# 启动Chrome浏览器（如需IE，使用Start-SeInternetExplorer）
$driver = Start-SeChrome

# 导航到SiteScope URL——浏览器会自动处理登录和重定向
$driver.Navigate().GoToUrl($siteScopeUrl)

# 等待「关于页面」加载完成（可根据页面元素调整等待逻辑，这里用简单休眠）
Start-Sleep -Seconds 5

# 获取当前页面的完整HTML源代码
$aboutPageHtml = $driver.PageSource

# 清理：关闭浏览器
$driver.Quit()

# 输出HTML源代码
Write-Output $aboutPageHtml

这种方法完全复刻浏览器行为，对复杂的Web流程来说非常可靠。

内容的提问来源于stack exchange，提问作者bijesh v venu