怎样维护爬虫程序中的代理ip库?
2019年1月13日 14:11

代理ip 有的变得连接很慢,甚至连不上,有什么样的机制可以让ip列表保持较好的可用性?不如创建一个验证代理的服务吧,定期扫描库存代理,更新可用性,遇到不可用的就删除或者标记。

如果有能力,自己建独享代理IP服务器,很稳定,不存在所谓的失效。否则通过购买动态代理IP的,要设置验证程序,把所有代理IP放在Redis或者其他文件中,按几分钟测试一遍,失效就删除。

734 186

上一篇:代理ip能否用于淘宝、京东刷单?

下一篇:没有使用代理ip的情况

相关文章

旗下产品

软件IP代理 企业HTTP代理 开放HTTP代理 高速硬件IP代理
@ 2016 - 2024.猎鹰网安IP代理, All rights reserved. 鄂ICP备18017015号-4
禁止利用本站资源从事任何违反本国(地区)法律法规的活动
新闻中心 | 其他新闻 | 帮助文档