当浏览器使用相同的网址时，requests.get返回403

当浏览器使用相同的网址时，requests.get返回403

嗯，这是因为默认

User-Agent

的

requests

是

python-requests/2.13.0

，和你的情况是网站不要像“非浏览器”流量，因此他们试图阻止此类流量。

>>> import requests>>> session = requests.Session()>>> session.headers{'Connection': 'keep-alive', 'Accept-Encoding': 'gzip, deflate', 'Accept': '*/*', 'User-Agent': 'python-requests/2.13.0'}

您需要做的就是使请求看起来像来自浏览器，因此只需添加一个额外的

header

参数即可：

import requestsheaders = {'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/56.0.2924.76 Safari/537.36'} # This is chrome, you can set whatever browser you likeresponse = requests.get('http://www.rlsnet.ru/search_result.htm?word=%D6%E5%F0%E5%E1%F0%EE%EB%E8%E7%E8%ED', headers=headers)print response.status_preprint response.url200 http://www.rlsnet.ru/search_result.htm?word=%D6%E5%F0%E5%E1%F0%EE%EB%E8%E7%E8%ED