This topic created in 3543 days ago, the information mentioned may be changed or developed.
换 IP 正在使用,但效率很烂,所以才想提高单 IP 的获取数量
GG 会根据不同的 UA 返回不同样式的数据,尝试 PC 、移动端的 UA 也不咋地
Supplement 1 Aug 27, 2016 目前的方案,服务器绑定 N 个 IP ,不同 IP 出口设置随机时间间隔, ua 、 ref 全部随机,验证码基本 200+左右出现一次
6 replies 2016-08-27 22:00:13 +08:00  | | 1 em70 Aug 27, 2016 要论爬虫技术,这个世界谁有 google 厉害,任何小伎俩都是班门弄斧,别折腾了 |
 | | 2 tumb8r Aug 27, 2016 via iPhone @ em70 说的很有道理敢爬世界上最大的爬虫,加油 |
 | | 3 lbp0200 Aug 27, 2016 via Android 主要是验证码 |
 | | 4 lbp0200 Aug 27, 2016 via Android 楼主百度的?不用自己爬了,好办法 |
 | | 5 dsg001 Aug 27, 2016 @ lbp0200 用来跟踪网站排名,方便以后分析的。 另外百度应该有足够的 IP 进行轮询吧 |