如何无需Selenium用Python定时执行网页JavaScript并获取内容

首先明确：仅用requests或websockets完全做不到你要的前两项操作，原因如下：

• Facebook群组是动态渲染的单页应用，requests.get()只能拿到最基础的页面骨架，帖子内容都是前端JS后续加载的。
• window.scrollBy和dispatchEvent这类操作都是浏览器专属的JS DOM API，只有在真实的浏览器环境里才能执行——requests是纯HTTP请求库，没有DOM解析和JS运行能力，根本模拟不了浏览器的滚动和事件触发行为；websockets只能处理实时通信，也替代不了浏览器的前端执行环境。

更轻量的替代方案（比Selenium省资源） #

既然旧电脑跑Selenium卡，推荐用轻量无头浏览器工具，它们的资源占用远低于完整的Selenium+Chrome：

1. Playwright 无头模式 #

Playwright支持无头运行Chrome/Firefox/WebKit，默认资源占用很低，API也简洁，能直接实现你要的所有操作，示例代码如下：

from playwright.sync_api import sync_playwright
import time

def automate_facebook_group():
    with sync_playwright() as p:
        # 无头模式启动浏览器，可加args进一步降低资源占用
        browser = p.chromium.launch(headless=True, args=["--disable-gpu", "--no-sandbox"])
        page = browser.new_page()
        page.goto("https://www.facebook.com/groups/221618226594414/")
        
        # 这里需要提前处理登录，比如导入已登录的cookie，避免每次都输账号密码
        # page.context.add_cookies(your_saved_cookies)
        
        while True:
            # 执行滚动
            page.evaluate("window.scrollBy(0, 6000)")
            # 等待内容加载
            time.sleep(2)
            
            # 定位顶部7条帖子并触发focusin事件
            posts = page.query_selector_all("div[role='article']")[:7]
            for post in posts:
                page.evaluate("""
                    post => {
                        const event = new FocusEvent('focusin', {view: window, bubbles: true, cancelable: true});
                        post.dispatchEvent(event);
                    }
                """, post)
            
            # 获取完整页面内容
            page_content = page.content()
            # 这里添加你处理内容的逻辑...
            
            # 等待5分钟
            time.sleep(300)
        
        browser.close()

if __name__ == "__main__":
    automate_facebook_group()

2. Pyppeteer #

这是Chrome官方Puppeteer工具的Python封装，同样基于无头Chrome，资源占用比Selenium小很多，也能轻松实现滚动、事件触发等操作。

重要提醒 #

Facebook反爬机制很严，频繁自动化操作容易被封号，建议：

• 用真实账号的cookie登录，不要每次都新建会话
• 给操作加随机延迟，别严格卡5分钟的点
• 尽量模拟真实用户的行为节奏，别一次性触发太多操作

如果硬想用requests模拟，得逆向Facebook的内容加载API，这需要破解接口的签名和加密逻辑，不仅难度极大，而且Facebook随时会改接口规则，维护成本高到不现实，远不如轻量无头浏览器靠谱。

内容的提问来源于stack exchange，提问作者user2401856