在使用python爬虫的时候，我们经常会遇到想要抓取的网站，并且采用了严格的反抓取机制。当网页信息是高强度时、在高效抓取的时候，往往会给网站服务器带来很大的压力，所以如果同一个IP反复抓取同一个网页，很可能会被屏蔽，那么如何解决呢？只有大量的代理IP资源可供选择俗话说: IP被封，千千有几千个IP。

那么海量的代理IP资源哪里来的呢？别忘了找百度搜索，大量代理IP资源，免费代理IP，代理IP提供商。

总结一下，代理IP大致可以分为四种:免费代理IP、普通代理IP池、共享IP池和专用IP池。什么这四个有什么区别？互联网上的免费代理IP共享。任何人未经授权都可以使用。因为任何人都可以使用它，大多数免费代理IP号码不 它们不存在，而且被滥用了。普通代理IP或者开放代理IP其实就是免费代理IP。通过收集免费代理IP，经过初步验证筛选后，放入IP池，通过API提取使用。这个代理IP的效率也高不了多少，一般在1-40%左右，被称为“万人骑”共享IP池是代理IP提供商通过机房搭建的IP池，然后卖给不同的客户。这个IP是高效的，大部分付费代理IP都是如此。IP池的大小和用户数量决定了服务的成功率独占IP池是一个完全独享的拨号服务器池，一个人使用一个IP池，不断重拨，获得大量IP！

考虑到成本优先级为:，免费代理IP，普通代理IP，共享IP池，独享IP池。代理IP基本没有成本，只需要写几段代码抓取验证即可。至于我能用多少，我知道。普通代理IP的成本也很低。一天几块钱，一个月几十块钱，可以有很多代理IP。至于多少，就看运气了。共享IP池成本略高，目前市场上基本都是这样，有提取间隔、一次获得的IP数量、同时使用和其他限制，独享IP池的成本比较高。目前市场上只有几家，很大一部分都是打着专属IP池的幌子骗人的选择的时候睁大眼睛。

很多时候，选择代理IP都是从成本和效率的考虑出发，但有时并不要只考虑一个方面，我们会通过成本和效率的综合考虑，最终做出最合适的选择。