使用wget经过重定向POST表单登录凭证无法成功登录怎么办?
问题根因
你猜测的第一个问题成立,wget默认遇到301/302重定向时,会自动将POST请求转换为GET请求,你设置的POST表单数据只会发送给第一个间接URL,经过两次重定向到实际登录页时,请求方法已经变为GET,登录凭证完全丢失,自然无法完成登录,也拿不到登录后的有效Cookie。
修复方案
1. 保留重定向时的POST提交
给wget添加--post301、--post302参数,要求wget在遇到301、302重定向时依然保持POST方法提交表单数据,同时调大重定向次数限制避免被截断:
wget \ --save-cookies cookies.txt \ --keep-session-cookies \ --post-data "username=$username&password=$password" \ --max-redirect 5 \ --post301 \ --post302 \ "$indirect_url"
2. 排查其他可能错误
如果加了上述参数依然无法登录,检查以下常见问题:
- 表单参数匹配问题:确认登录表单的字段名是否真的是
username和password,大部分站点会额外要求提交CSRF Token、会话标识等隐藏字段,你需要先请求一次登录页面,从返回的HTML中提取所有必填表单参数,一并放到--post-data中提交。 - 反爬校验问题:很多站点会校验请求的User-Agent、Referer头,你可以添加参数模拟浏览器行为:
--user-agent "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.124 Safari/537.36" --referer "$indirect_url" - 预会话Cookie问题:部分站点会在首次访问间接URL时下发预会话Cookie,没有该Cookie的POST请求会被直接拦截,可以拆分两步操作,先获取预会话Cookie再提交登录:
第一步获取预Cookie:
第二步提交登录请求:wget --save-cookies cookies.txt --keep-session-cookies --spider "$indirect_url"wget \ --load-cookies cookies.txt \ --save-cookies cookies.txt \ --keep-session-cookies \ --post-data "username=$username&password=$password" \ --max-redirect 5 \ --post301 \ --post302 \ --user-agent "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/91.0.4472.124 Safari/537.36" \ --referer "$indirect_url" \ "$indirect_url"
内容的提问来源于stack exchange,提问作者lycosis
相关产品推荐
相关产品推荐

