Python 爬虫 302 重定向

[techiall]

python 中的 requests 是会跟着重定向，要想关闭自动重定向，需要在请求中关闭 allow_redirects=False 即可。

    r = requests.post(
        url=url,
        allow_redirects=False
    )
    print(r.headers['Location'])

• 想获得重定向后的地址，可以从请求后的 headers 中获得 Location 的值即可。
• 自己再构造提交即可跳转到新的页面。
• 跳转后的网站，网站可能会检查 headers 中的 Referer 参数，如果不是从重定向来的地址，会请求失败。
• 在请求跳转的网站时，headers 只要把 Referer 加上即可。

参考代码如下

    r = requests.post(
        url=url,
        allow_redirects=False
    )
    print(r.headers['Location'])
    r_new = requests.get(
        url=new_url,
        headers={
            "Referer": "".format(r.headers['Location']),
            "Host": host
        }
    )