在学习Python的初期，许多白人遇到爬虫类IP受到限制的情况，面对这种突发情况，许多白人无能为力，不要着急，教你3招搞定哦！
第一招：设置代理IP，降低访问速度，不可避免地影响爬行的抓取效率，不能有效抓取
在使用代理ip时，必须选择高匿名、高性能的付费代理ip哦。高质量HTTP代理，免费送10000个IP测试，注册自动到账：http://h.zhimaruanjian.com/?utm-source=tb&utm-keyword=?01可以自定义选择提取格式，ip数量，支持协议、端口等参数
这么慢的抓取速度和人工抓取有什么区别？没有利用爬虫捕捉的好处了。突破反爬虫机制继续高频抓取。网站的反爬机制检查访问的IP地址，为了防止IP被封印，可以使用代理IP切换不同的IP爬行内容
第二招：建立IP池，池塘尽量大，IP交替均匀。
线程、多过程、这里与代理商合作，不同的线程使用不同的IP地址，同时访问不同的用户，可以大幅度提高爬行动物的爬行效率。
第三招、降低访问速度，减少对目标站点的压力
不要过早访问。否则，IP就会关闭。我们首先要检测网站设置的限速门槛，这样才能设置合理的访问速度，建议不要设置固定的访问速度，可以设置在一个范围内，因为太规则而被系统检测到，IP也会被封
对于能以提示效率的代理IP，爬虫类选择高质量的使用，质量差也会影响效果。建议选择高质量的代理IP网站。