使用Apify-Smart Article Extractor处理带Load More按钮的爬取求助

针对你用Apify Smart Article Extractor爬取https://pharmaphorum.com/oncology时遇到的加载更多按钮问题，给你几个实用方案：

• 用工具自带的动态加载处理功能
  打开Smart Article Extractor的配置面板，找到「页面选项」板块，开启「点击加载更多按钮」的选项。先右键点击网页上的“Load More”按钮，选择「检查」，复制它的CSS选择器（比如类似.cmp-load-more__button这类，具体以你实际检查到的为准），把这个选择器粘贴到工具对应的输入框里。工具会自动重复点击按钮，直到没有新内容加载出来。

• 自定义浏览器操作兜底
  如果自带功能没生效，就用Apify的「自定义浏览器操作」功能：

  • 选择动作类型为「点击元素」
  • 填入刚才复制的Load More按钮CSS选择器
  • 设置重复次数（比如填20次，或者选「元素消失时停止」）
  • 可以加个2-3秒的等待时间，确保每次点击后内容能加载完成

• 先预览测试再正式爬取
  在启动爬取任务前，先在工具的预览模式里测试一下，确认点击按钮后能正常加载更多文章，选择器没写错，再运行正式任务。

内容的提问来源于stack exchange，提问作者marie20