当前位置 : 主页 > 网络编程 > PHP >

如何快速使用IP代理池?

来源:互联网 收集:自由互联 发布时间:2023-09-06
1.使用自己搭好的代理池或者别人搭建好的代理池,一般都是网页api的形式。 【建议多去Github逛逛,有你意想不到的收获,也能提高英语和参与一点项目的改进】 (1)第一步当然是你


1.使用自己搭好的代理池或者别人搭建好的代理池,一般都是网页api的形式。
【建议多去Github逛逛,有你意想不到的收获,也能提高英语和参与一点项目的改进】

(1)第一步当然是你的api地址了。
例如:

self.PROXY_POOL_URL = 'http://localhost:5000/get'

如何快速使用IP代理池?_pytorch


(2)向代理池的api发送请求获取返回的IP【一般以字符串返回】

def get_proxy(self):#代理池 并未启用
try:
response = requests.get(self.PROXY_POOL_URL)
if response.status_code == 200:
return {
'http':response.text,
'https':response.text
}
#proxies=Movie.get_proxy(self)
except ConnectionError:
return None

如何快速使用IP代理池?_深度学习_02


(3)获取到之后,注意requests接受的代理的格式是字典格式

2.此外,可以从网上由IP代理的网站边抓取边使用,或者抓取了之后放到数据库或者一个网页的api上方便使用。


网友评论