爬去豆瓣IP被封,用IP代理解决

时间:2023-02-07 17:58:47
import requests
import random

#用不同IP去访问要爬去的网站

#在https://proxy.coderbusy.com/找到的IP地址(不停刷新即可)
pro=['122.152.196.126','114.215.174.227','119.185.30.75']
#头信息
head={
 'user-Agent':'Mozilla/5.0(Windows NT 10.0;Win64 x64)AppleWebkit/537.36(KHTML,like Gecko) chrome/58.0.3029.110 Safari/537.36'
}
url='http://www.whatismyip.com.tw/'
r=requests.get(url,proxies={'http':random.choice(pro)},headers=head)
#用随机生成的一个IP去访问这个网页
r.encoding=r.apparent_encoding
print(r.status_code)
print(r.text)