火车头采集大批量数据,被采集源网站封ip,而使用代理ip,既不稳定,采集速度又慢,有没有其他方法可解 财富值93

2016-07-23 20:50发布

火车头采集大批量数据,被采集源网站封ip,而使用代理ip,既不稳定,采集速度又慢,有没有其他方法可解决?
友情提示: 此问题已得到解决,问题已经关闭,关闭后问题禁止继续编辑,回答。
该问题目前已经被作者或者管理员关闭, 无法添加新回复
3条回答
如果你要采的既快又稳定,火车采集器可能无法达成你的需求,我能提供的建议有
1.搞成百上千百客户端,降低抓取频率
2.购买足够多的ip,使用不同的ip去抓取
3.购买足够多的adsl,不断的拨号换ip
用众大云采集,在***采集好内容再返回给你,这样就不会封你的ip了。
用adsl 不现实,现在业内都是买ip

一周热门 更多>