You need to enable JavaScript to run this app.
优惠活动
大模型
产品
解决方案
定价
更多

Chrome插件爬虫访问KuCoin P2P页面时Cookie导致货币筛选异常的解决方案求助

Chrome插件爬虫访问KuCoin P2P页面时Cookie导致货币筛选异常的解决方案求助

我现在用Chrome插件做网站爬虫,其中一个目标是KuCoin的P2P交易页面。最近遇到了一个特别头疼的问题:这个页面的货币筛选器会设置一个Cookie,记住你上次选择的货币,这直接打乱了我的爬虫逻辑——因为我的爬虫是通过直接访问指定URL来抓取对应货币的交易数据的。

举个实际场景的例子就能明白:

第一次访问https://www.kucoin.com/nl/otc/buy/BTC-EUR时,页面正常显示欧元区的BTC交易列表,爬虫能正常抓取内容并分页。
之后爬虫会切换到其他货币进行抓取,比如最后访问的是美元区的页面https://www.kucoin.com/nl/otc/buy/BTC-USD。
当爬虫要开始新一轮抓取ETH的欧元区数据,直接访问https://www.kucoin.com/nl/otc/buy/ETH-EUR时,页面却自动跳转到了https://www.kucoin.com/nl/otc/buy/ETH-USD——就是因为那个记录上次货币选择的Cookie在作祟,页面加载时优先读取Cookie里的设置,完全忽略了URL里的参数。

我已经尝试过几种方法,但都没解决问题:

  • 试过市面上各种Cookie拦截插件,但要么只拦截第三方Cookie对这个第一方Cookie无效,要么直接拦截所有Cookie/本地存储,导致页面根本加载不出来。
  • 之前觉得EditThisCookie看起来最靠谱,能针对性操作Cookie,但奇怪的是它根本检测不到这个搞事情的Cookie,可能它只处理第三方Cookie?
  • 还试过单点击Cookie清除工具,每次点击能清除那个Cookie,之后访问指定URL就正常一次,但页面加载后Cookie又会重新生成,总不能手动每秒点一次吧...

现在我急需一个可行的解决方案,不管是以下哪种方式都可以:

  • 阻止这个特定Cookie被创建或读取
  • 让Chrome加载页面时忽略现有Cookie
  • 爬虫运行时每秒自动清除指定(或所有)Cookie

已经被这个问题折腾好几天了,求各位大佬帮忙!

备注:内容来源于stack exchange,提问作者Dries Vermeulen

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.04.20 09:19:32