C#使用HTTP Client实现维基百科搜索的相关问题咨询

方案1：直接调用维基百科官方搜索接口（最推荐，无需模拟浏览器/表单操作） #

维基百科本身开放了公开搜索接口，不需要模拟前端交互就能拿到结果，C# 直接用 HttpClient 即可实现，返回格式支持 JSON、HTML 两种类型，完全满足你获取结果页面 HTML 的需求。
极简实现示例：

using System.Net.Http;
using System.Threading.Tasks;

public async Task<string> GetWikiSearchResultHtml(string keyword)
{
    using var client = new HttpClient();
    // 直接构造搜索结果页地址，自动触发搜索
    string searchUrl = $"https://zh.wikipedia.org/w/index.php?search={Uri.EscapeDataString(keyword)}";
    // 返回值就是搜索结果页的完整HTML，可直接用Html Agility Pack解析
    return await client.GetStringAsync(searchUrl);
}

如果需要结构化的搜索结果，也可以调用官方JSON格式的API，参数仅需替换为对应接口地址即可。

方案2：浏览器自动化方案（适合需要模拟真实用户填入、点击操作的场景） #

如果你的需求确实需要模拟用户在前端输入关键词、确认填入后再提交的流程，可以使用C#生态两个成熟的自动化库：

• Selenium WebDriver：生态最完善的浏览器自动化工具，支持所有主流浏览器，可实现模拟输入、点击、读取页面源码等全量用户操作
• Playwright for .NET：微软推出的新一代自动化工具，内置元素等待、网络拦截能力，比Selenium更轻量，环境配置更简单
  Selenium极简实现示例：

using OpenQA.Selenium;
using OpenQA.Selenium.Chrome;

public string SimulateWikiSearch(string keyword)
{
    using var driver = new ChromeDriver();
    // 打开维基百科主页
    driver.Navigate().GoToUrl("https://zh.wikipedia.org/");
    // 定位右上角搜索框
    var searchInput = driver.FindElement(By.Id("searchInput"));
    // 填入搜索关键词，这一步后你可以直接读取页面源码确认内容已填入
    searchInput.SendKeys(keyword);
    // 提交搜索
    searchInput.Submit();
    // 返回搜索结果页完整HTML
    return driver.PageSource;
}

方案3：HttpClient模拟表单提交（不推荐，需额外处理反爬校验） #

如果一定要用纯HttpClient模拟表单提交逻辑，抓包可知维基搜索表单的提交地址为https://zh.wikipedia.org/w/index.php，核心提交参数为search（值为搜索关键词），请求方法用GET即可，逻辑和方案1的直接获取搜索结果页一致。

内容的提问来源于stack exchange，提问作者Virophage