使用Python Pyppeteer抓取TikTok粉丝数仅返回元素对象问题求助

你当前拿到的输出是Pyppeteer的元素句柄对象，原因是仅执行了xpath匹配获取元素对象，没有进一步提取元素内的文本内容，另外缺少动态页面等待逻辑，可能出现元素未渲染完成就提前取值的问题。

调整后的代码 #

@bot.command()
async def stats(ctx):
    statspage = await browser.newPage()
    await statspage.goto('https://livecounts.io/tiktok-live-follower-counter/charlieputh')
    # 等待目标元素加载完成，最长等待10秒
    await statspage.waitForXPath('//*[@id="__next"]/div/div/div[3]/div[2]/div/div/div/div', timeout=10000)
    # 执行xpath匹配
    element_list = await statspage.xpath('//*[@id="__next"]/div/div/div[3]/div[2]/div/div/div/div')
    if element_list:
        # 提取第一个匹配元素的文本内容
        follower_count = await (await element_list[0].getProperty('textContent')).jsonValue()
        # 清理文本首尾空格
        follower_count = follower_count.strip()
        # 控制台输出
        print(f"粉丝数：{follower_count}")
        # 发送到Discord频道
        await ctx.send(f"查询到的TikTok账号粉丝数为：{follower_count}")
    else:
        err_msg = "未匹配到粉丝数元素，获取失败"
        print(err_msg)
        await ctx.send(err_msg)

关键修改说明 #

• 新增waitForXPath等待逻辑：目标站点是动态渲染的，goto执行完成时页面数据可能还没加载出来，等待元素渲染完成后再取值可以避免匹配不到元素的问题
• 元素文本提取：xpath返回的是匹配到的元素句柄列表，需要先取出第一个匹配元素，再通过getProperty('textContent')获取元素的文本属性，最终用jsonValue()把JS属性值转为Python可直接使用的字符串
• 增加异常分支处理：匹配不到元素时不会出现索引越界报错，会返回明确的失败提示

内容的提问来源于stack exchange，提问作者pythonguy