使用Selenium读取网页表格时特定列文本为空的问题排查

• 在C# WinForms应用中使用Selenium 4.8.1读取需密码验证的网页表格数据，表格共8列，其中5列可正常读取，但第6列（Status）始终返回空值，预期应返回如“Potvrzené”或“Nevyřízené”的捷克语文本。第5列（电话号码）可正常读取，怀疑是否存在捷克字符支持问题。

string test = browser.FindElement(By.XPath("//*[@id=\"post-580\"]/div/div[2]/table/tbody/tr[2]/td[6]")).Text;

// Google setup
var chromeOptions = new ChromeOptions();
chromeOptions.AddArguments("--headless");

// Console hiding
var chromeDriverService = ChromeDriverService.CreateDefaultService();
chromeDriverService.HideCommandPromptWindow = true;

try
{
    using (var browser = new ChromeDriver(chromeDriverService, chromeOptions))
    {
        // Page setup 
        browser.Navigate().GoToUrl("my-page");

        // Password adding + clicking
        browser.FindElement(By.Id("pwbox-580")).SendKeys("password");
        browser.FindElement(By.Name("Submit")).Click();

        // Finging table
        IWebElement tableElement = browser.FindElement(By.XPath("//*[@id=\"post-580\"]/div/div[2]/table"));

        // Finding row
        IList<IWebElement> rows = tableElement.FindElements(By.XPath("//*[@id=\"post-580\"]/div/div[2]/table/tbody/tr"));


        // Data
        int pocet = 0;
        rezervace_data.Clear();

        foreach (IWebElement row in rows)
        {
            // Row reading
            IList<IWebElement> columns = row.FindElements(By.XPath(".//td"));

            // Inicialization 
            rezervace_data.Add(pocet, new Params_Rezervace());

            // Storing data to dictionary
            rezervace_data[pocet].Cas = columns[0].Text;
            rezervace_data[pocet].Pocet_Hostu = columns[1].Text;
            rezervace_data[pocet].Jmeno = columns[2].Text;
            rezervace_data[pocet].Email = columns[3].Text;
            rezervace_data[pocet].Telefon = columns[4].Text;
            rezervace_data[pocet].Status = columns[5].Text;
            rezervace_data[pocet].Podrobnosti = columns[6].Text;

            if (columns[7].Text == "")
            {
                rezervace_data[pocet].Stul = "Preferují stůl uvnitř";
            }
            else
            {
                rezervace_data[pocet].Stul = "Preferují stůl venku";
            }

            // Next row to dictionary
            pocet++;
        }
        // Ending 
        browser.Close();
        browser.Quit();
    }
}
catch (Exception ex)
{
    MessageBox.Show("Error getting data from website! \n" + ex, "Error", MessageBoxButtons.OK, MessageBoxIcon.Information);
}

• Selenium版本：4.8.1
• 网页包含ěščřžýáíé等捷克字符
• 基于C#的WinForms应用

先排除捷克字符编码问题——第5列能正常读取，且Selenium原生支持UTF-8，所以问题大概率不在字符编码上，重点排查以下几点：

1. 确认元素定位准确性

   • 在浏览器开发者工具中测试XPath //*[@id="post-580"]/div/div[2]/table/tbody/tr[2]/td[6]，检查是否精准选中了包含状态文本的元素。
   • 若状态文本嵌套在<span>或其他子标签内，直接取<td>的.Text可能无法获取内容，需定位到子元素再读取，示例：

     string test = browser.FindElement(By.XPath("//*[@id=\"post-580\"]/div/div[2]/table/tbody/tr[2]/td[6]/span")).Text;
     

2. 修复无头模式渲染差异

   • 无头Chrome可能存在渲染问题，导致元素文本未加载。先去掉--headless参数，用可视化模式运行，看是否能获取到文本。如果可视化模式正常，调整无头模式参数：

     chromeOptions.AddArguments("--headless=new"); // 启用新版无头模式
     chromeOptions.AddArguments("--disable-gpu");
     chromeOptions.AddArguments("--no-sandbox");
     

3. 添加显式等待确保元素加载

   • 提交密码后页面可能异步加载表格，直接读取会导致文本未渲染。添加显式等待，确保元素文本加载完成：

     var wait = new WebDriverWait(browser, TimeSpan.FromSeconds(10));
     var statusElement = wait.Until(d => d.FindElement(By.XPath("//*[@id=\"post-580\"]/div/div[2]/table/tbody/tr[2]/td[6]")));
     string test = statusElement.Text;
     

   • 也可以先等待表格行加载完成：

     wait.Until(d => d.FindElements(By.XPath("//*[@id=\"post-580\"]/div/div[2]/table/tbody/tr")).Count > 1);
     

4. 用innerHTML替代Text属性

   • 如果.Text无法获取内容，尝试读取元素的innerHTML属性，直接获取HTML中的文本内容：

     string test = browser.FindElement(By.XPath("//*[@id=\"post-580\"]/div/div[2]/table/tbody/tr[2]/td[6]")).GetAttribute("innerHTML").Trim();
     

5. 验证编码（可选）

   • 若以上方法无效，可验证获取到的内容是否有隐藏字符：

     string status = columns[5].Text;
     byte[] bytes = Encoding.UTF8.GetBytes(status);
     // 输出字节数组查看是否存在内容
     

内容的提问来源于stack exchange，提问作者TriXcze