本文目录一览:
动态IP池如何搭建?
工具/原料
more
ip *** 抓取: requests 后台搭建: Django+Redis *** 检测: ip地址查询 *** 抓取地址: 西刺 ***
*** /步骤
1/5 分步阅读
爬取 *** ip,获取如下信息:
IP地址、端口、服务器地址、类型、是否匿名、类型、存活时间、验证时间
2/5
分别在Redis中和ip查询接口中,验证 *** ,成功则计算过期时间,并进行分类。
3/5
将状态,类型,过期时间分别写入Redis。
4/5
每隔15分钟进行爬取
ip *** 自动去重
提供Python的调用的接口,和http接口
保证 *** 的高可用,在每次调用的时候验证 *** 可靠性
5/5
具体所会遇到的一些代码说明
注意事项
通常 *** 可以从免费的 *** ip网站爬取
当需求量过大的时候建议使用换ip软件,诸如太阳换ip软件之类的,效率会有所提高
IP *** 免费那种自带上千个IP的
直男福利:苦心筛选出来的12大免费长效 *** IP IE里面设置了即可用!
140.246.45.153:3828
36.111.191.243:3828
140.246.151.112:3828
203.57.228.9:3828
140.246.117.104:3828
140.246.195.171:3828
42.123.126.228:3828
140.246.94.124:3828
140.246.234.31:3828
140.246.161.18:3828
140.246.91.197:3828
42.123.126.227:3828