如题
是不是意味着被爬目标通过限制 IP 访问频率不如以前奏效了呢?

如题
是不是意味着被爬目标通过限制 IP 访问频率不如以前奏效了呢?
1 lgh Aug 3, 2017 via iPhone 不是更容易被误伤了吗? |
2 neurocomputing OP @lgh 是的,所以 IP 频率限制会逐渐变松,否则就有可能拦住很多正常用户了吧 |
3 jiangzhuo Aug 3, 2017 理论上讲公开的网站是禁止不了爬虫的对不对? 我们这有款智能路由产品可以提供代理功能,可以通过平台使用这些家用路由作为爬虫代理,不知道对这种产品有没有兴趣(这只是实验产品 |
4 nodeath Aug 3, 2017 通过 ip 限制爬虫很头疼,云爬虫 ip 库量非常大 |
5 XiaoxiaoPu Aug 3, 2017 via iPhone @jiangzhuo 这叫智能?明明是流氓。 |
6 neurocomputing OP @jiangzhuo 这主题都有机会插进来广告。。。 |
8 jiangzhuo Aug 3, 2017 @XiaoxiaoPu #5 @neurocomputing #6 @UnisandK #7 这产品还在停留在原型阶段,我觉得也不会真正成为产品 要绕路的,我建议还是买回去刷自己喜欢的系统吧,牌子型号太多。 |