挂代理也被要求验证? - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
请不要在答技术问题时复制粘贴 AI 生成的内容
Northxw
V2EX    程序员

挂代理也被要求验证?

  •  
  • Northxw 2019-04-07 16:14:50 +08:00 3819 次点击
  • 这是一个创建于 2384 天前的主题,其中的信息可能已经有所发展或是发生改变。
    买了几个大洋的付费代理,爬取 58 同城,但还是有一半的 IP 被要求验证,难道说是我大洋给少了??? 然后我又添加了 UA 中间件,效果稍微好一点。但还是会有很多动态 IP 被 ban 掉,想问大家有什么解决办法没。
    20 条回复    2019-04-09 21:46:57 +08:00
    cpdyj0
        1
    cpdyj0  
       2019-04-07 16:21:40 +08:00 via Android
    代理的 IP 被 ban 掉很正常咯,可以考虑中转 emmm
    Northxw
        2
    Northxw  
    OP
       2019-04-07 16:23:34 +08:00
    @cpdyj0 emmm... 代理 IP 不就是中转请求的吗,为什么还要中转! 怎么中转.... 求解释。
    claysec
        3
    claysec  
       2019-04-07 16:29:20 +08:00   1
    @Northxw 现在爬虫的话最好的话用分布式+动态 ip+随机 UA +随机时间请求的方式。最大化减少被 ban 的可能。
    andylsr
        4
    andylsr  
       2019-04-07 16:34:05 +08:00 via Android
    adsl
    Northxw
        5
    Northxw  
    OP
       2019-04-07 16:36:35 +08:00
    @claysec 随机时间你一般控制在哪个区间,可不要放弃效率啊。


    @andylsr 噗,贵的 ya 皮。
    andylsr
        6
    andylsr  
       2019-04-07 16:41:29 +08:00 via Android
    @Northxw 代理不靠谱~钱也是白花~不如 adsl 按周付费~也没那么贵
    e2c
        7
    e2c  
       2019-04-07 16:45:22 +08:00
    现在不是能判断 IP 是否为 IDC 机房的 IP,这样就能大概知道是真人还是机房代理,所以被 BAN 的机率就上去了
    Northxw
        8
    Northxw  
    OP
       2019-04-07 16:52:32 +08:00
    @andylsr 我先前看最低好像时按月付费 emmm... 可以了解一下

    @e2c 嗯哼?这个我还不知道哎
    claysec
        9
    claysec  
       2019-04-07 16:53:00 +08:00
    @Northxw 1-3s 3-5s 这两个区间。效率可以用时间弥补。不能快而求其次啊。除非你抓的东西真的一点都不重要,哈哈哈哈(滑稽)
    claysec
        10
    claysec  
       2019-04-07 16:56:04 +08:00
    @Northxw #7 也是参考依据之一
    ji4ozhu
        11
    ji4ozhu  
       2019-04-07 17:56:43 +08:00
    www.54nb.com 参考下
    andylsr
        12
    andylsr  
       2019-04-07 18:13:30 +08:00 via Android
    @Northxw 善用淘宝。。。
    Northxw
        13
    Northxw  
    OP
       2019-04-07 18:52:56 +08:00
    @andylsr 搜嘎
    Northxw
        14
    Northxw  
    OP
       2019-04-07 18:53:09 +08:00
    @ji4ozhu 可以的
    shuiyingwuhen
        15
    shuiyingwuhen  
       2019-04-08 10:00:10 +08:00
    代理的 IP 被 ban 掉很正常咯
    Northxw
        16
    Northxw  
    OP
       2019-04-08 10:57:23 +08:00
    @shuiyingwuhen 看来还是要搞 ADSL,真机般的存活,美滋滋。哈哈
    shuiyingwuhen
        17
    shuiyingwuhen  
       2019-04-09 07:37:27 +08:00 via Android
    @Northxw 我还真用的是 ADSL
    Northxw
        18
    Northxw  
    OP
       2019-04-09 07:42:55 +08:00
    @shuiyingwuhen 贵吗?求推荐。
    shuiyingwuhen
        19
    shuiyingwuhen  
       2019-04-09 21:36:47 +08:00
    @Northxw 中国联通 720 元 /2 年
    坐标:成都
    Northxw
        20
    Northxw  
    OP
       2019-04-09 21:46:57 +08:00
    @shuiyingwuhen 很便宜,很实惠
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     941 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 32ms UTC 22:30 PVG 06:30 LAX 15:30 JFK 18:30
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86