爬虫常见的问题

1, 自己搭建代理服务器，稳定，但需要大量的服务器资源，一来是因为技术含量过高，二来成本太高

2从免费的网站上获取，质量很低，能用的IP极少。实用性，稳定性，安全性，来考虑不建议大家使用免费IP,不能达到网络爬虫在抓取相关信息的过程中，如果之前的频率太高会被网站的反爬虫机制检测出来，反爬虫机制会通过你的ip来识别网络爬虫

3，运行拨号网络，重新拨号。这种方法步骤很古老，效率低，实际运行效果很差。

4、运行大规模云采集集群辅助工具，顾名思义就是你借用别人的技术成品。
5、运行代理IP，通过运行大量保持稳定的代理IP，突破目标网站内容IP限制，比如易代理www.ydaili.cn拥有庞大的代理IP池，专门针对网络爬虫用户， 支持API大批量提取IP， IP保持稳定安全， 运行见效快。