一般来说，代理IP是时间有效的。简单来说就是有有效期。有效期过后，代理IP将失效。这时候需要检测有效性，建立检测方案检测代理IP的有效性，删除检测到的无效IP。IP池的IP低于某个阈值时，需要代理IP获得新的IP。
通常，我们有了代理IP池后，还需要设计一个外部接口，通过接口来调用IP给爬虫使用。代理IP池的功能比较简单，方便爬虫直接使用。
一般在爬取代理IP时都要使用接口的，一般都是从代理的资源网站进行抓取的。
建立爬虫代理ip池的方法基本上可以实现免费代理ip池。因为这些免费的IP稳定性较差，建议爬虫使用前再验证一遍，容易实现，可以直接调用自己编写的测试函数。
以上就是关于建立本地代理IP池的相关介绍了，希望能够给大家带来帮助，大家在建立本地代理IP时可以参照以上方法进项设计。
建立一个自己的IP池还是有很多作用的，比如可以解决爬虫过程中的封IP的问题，当然对我来说，没爬过反爬很严重的网站，还没有遇到过封IP的时候，但是也想弄一个自己的IP池免费IP的一大缺点是不稳定，很多都用不了，所以如果需求很大的话还是使用付费的更好。对我的IP池来说免费的已经足够了
本文主要实现了爬取免费IP并保存到本地，简单验证IP有效性，并且讲解了如何使用代理IP访问网页
完整的源码在我的GitHub：
GitHub - free-proxy-crawling: self-made ip pool stored in SQLite3, crawling free proxies from websites that offer them.
从一些提供免费IP的网站中抓取IP的功能用最基本的Python爬虫实现，爬取的网站有三个：
只爬取http的高匿IP，先将IP构造成 ip:port 的字符串形式存放在 temp_set 这个集合中，然后用Python自带的pickle库保存到本地
获取到了IP之后，有很多IP是无效的，我们可以运行一个检测程序，看所用的IP是否能够成功访问百度：
IP池最简单的一种使用方式就是刷浏览量了，比如，刷文章的浏览量，，，还有，墨墨背单词每日分享的页面，浏览量可以增加单词上限。这些用处还是挺吸引人的吧~
使用代理IP访问网页主要有两种方法，如果是用 requests 库，那么方法为：
也可以使用 selenium 库，方法为：
