最近在写了个爬虫，在一个网站爬东西，但是爬取页面比较多，被封ip了，虽然他允许输入验证码解封，但是数据量比较大，不能一直这样做，如何降低自己的速度，或者流量之类的，防止出现这种情况
------解决方案--------------------
Thread.sleep(10*1000); 然线程歇个10秒
详细解决方案
有关网络爬虫速度,该怎么处理
热度：25 发布时间：2016-04-22 03:00:14.0
最近在写了个爬虫，在一个网站爬东西，但是爬取页面比较多，被封ip了，虽然他允许输入验证码解封，但是数据量比较大，不能一直这样做，如何降低自己的速度，或者流量之类的，防止出现这种情况
------解决方案--------------------
Thread.sleep(10*1000); 然线程歇个10秒
相关解决方案