Python爬虫-解决IP封禁-代理

Python爬虫-解决IP封禁-代理,第1张

Python爬虫-解决IP封禁-代理 原理:

使用第三方的一个机器请求,然后第三方的机器把信息返回给我们。

proxies就是我们的代理池子:当访问使用的是https协议时,使用123.70.46.13这个ip地址的3128端口来进行访问。(不要忘记端口号)

proxies={
	"http":"ip地址:端口号"
    "https": "ip地址:端口号"
}
resp=requests.get(url,proxies=proxies)
老版本request
#原理,通过第三方的一个机器去请求
import requests

url="https://www.baidu.com"
proxies={
    "https": "124.70.46.14:3128"
}

resp=requests.get(url,proxies=proxies)
resp.encoding=resp.apparent_encoding
print(resp.text)
新版本request
#原理,通过第三方的一个机器去请求
import requests

url="https://www.baidu.com"
proxies={
    "https": "https://124.70.46.14:3128"
}

resp=requests.get(url,proxies=proxies)
resp.encoding=resp.apparent_encoding
print(resp.text)

我所使用的一个免费代理IP的网站https://www.zdaye.com/Free/

友情提示:代理终究是涉及到灰色地带的,能不用尽量不用,跟作者无任何关系,技术无罪!

欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/zaji/5436316.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-12-11
下一篇 2022-12-11

发表评论

登录后才能评论

评论列表(0条)

保存