1.相同的IP，慢下来(缓慢爬行)

 

2.使用动态ip访问(推荐)

 

第一种方案需要时间和速度来换取数据，但总的来说，我们的时间是有限的，理想情况下，我们需要最短的时间来获取最多的数据。所以推荐第二个方案，那么哪里可以找到这么多ip地址呢？

 

寻找代理

 

不懂程序的时候，找一下，谷歌，百度，输入关键词:免费动态ip。打开后可以看到几乎是一个列表页面。但是，如果你仔细观察，你会发现每个网站提供的免费IP仍然有限。用了之后会发现有些没用，很多都是付费的。随便用搜索引擎找免费的IP，每个网站都提供几十个或者几百个IP。如果有10个网站，加起来就是几百到几千个IP。你可以把这些网站录下来，用程序捕捉IP。做起来还是有点麻烦。

 

测试代理

 

对了刚才说的，你应该能拿到几百个或者几千个动态ip。IP免费吗？不，当然，这些特工很多都没用。如何确定哪些代理有效，哪些不可用？

 

挂上这些代理，然后找一个稳定的网站。如果你能正常访问它，它将是可用的。如果你不能访问它，它将是无用的。

 

当然，这种方法只是为了方便演示。其实最好的方法就是用多线程的方法，用代理访问一个网站，然后输出可用的代理。这样可以最快速地找到可用的代理。

 

目前腾讯、新浪、网易、搜狐、谷歌提供IP地址查询API，但腾讯、新浪、网易都能找到。谷歌需要使用谷歌地图，腾讯提供JavaScript，网易提供XML，新浪有很多格式。不管是JavaScript调用还是PHP调用，代码都要改，否则会乱码。但是如果一次查询多个IP，使用网站的API非常慢。无论是用PHP解析XML，还是用file_get_contents函数获取内容，查询10次以上都会非常慢，甚至可能会耗尽时间。

 

根据IP返回的近似位置信息的http，常见的IP位置API支持多种语言调用，如C#、C++、Java等。，即通过发送一个HTTP/HTTPS请求，将位置数据以JSON格式(包括经纬度信息、地址信息等。)被返回。

 

这个借口是免费的，但是你要先申请钥匙(AK)才能用。每个开发人员帐户每天可以使用多少次是有规定的。如需更多使用，请完成开发者认证，以获得更高的配额和更及时的技术支持。所谓高质量的动态ip必须具备三个具体特征:a .高匿名性，b .隐私性，c .纯资源性；

 

虽然购买高质量的ip代理非常容易，但毕竟近年来ip代理市场发展越来越快，无论是工作还是日常生活需要都能满足人们的各种需求。但是作为消费者，在找产品的时候，我们都想找到性价比最高，最适合自己的产品，这就比较难了。以精灵ip代理为例，软件不仅适合大多数人的消费观，还能为人们提供相应的优质动态ip资源，最重要的是这个软件是按使用次数收费的，更划算，更适合大众，以上就是爬虫ip被屏蔽问题的解决方案。