头条的同学,有个你们的程序问题请教 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
工单节点使用指南
请用平和的语言准确描述你所遇到的问题
厂商的技术支持和你一样也是有喜怒哀乐的普通人类,尊重是相互的
如果是关于 V2EX 本身的问题反馈,请使用 反馈 节点
war1644
V2EX    全球工单系统

头条的同学,有个你们的程序问题请教

  •  
  •   war1644 2017-10-25 16:05:54 +08:00 6389 次点击
    这是一个创建于 2967 天前的主题,其中的信息可能已经有所发展或是发生改变。

    现象

    你们有一个双标题系统,如下图所示: 两个标题,两个 url,但是内容却是一样的

    • 这种只能是团队自己的帐号才能看到

    问题

    如果游客去看这个团队的空间页,是只能看到其中一个视频的,另外一个是看不到的。我作为一个萌新爬虫,想看到另外一个视频的途径是什么?
    我的目的就是知道这个团队的名字后,想获取到这两个视频的播放量。现在只能获取到其中一个

    • 游客进入团队页的样子

    关于该主题

    我也不知道这个问题该不该问,如果触及什么利益,还请告知。如果大神有好的想法,多多指教。谢谢啦

    26 条回复    2017-10-26 14:00:30 +08:00
    nandaye
        1
    nandaye  
       2017-10-25 17:41:15 +08:00   2
    头条的同学,请问怎么能爬取你们头条的内容?哈哈哈
    alexgor
        2
    alexgor  
       2017-10-25 17:52:55 +08:00 via Android
    这视频标题有啥好打码的………黑人问号
    silenceeeee
        3
    silenceeeee  
       2017-10-25 17:53:04 +08:00
    这波操作可以
    war1644
        4
    war1644  
    OP
       2017-10-25 18:11:29 +08:00
    @nandaye 懂了,谢谢
    war1644
        5
    war1644  
    OP
       2017-10-25 18:14:46 +08:00
    @alexgor 怕说我搞广告,你看上面的同学不是都在开嘲讽了么
    silenceeeee
        6
    silenceeeee  
       2017-10-25 18:21:52 +08:00
    @war1644 误会,误会,没有嘲讽的意思,只是调侃下!
    18914940609
        7
    18914940609  
       2017-10-25 18:23:08 +08:00
    不告诉你
    war1644
        8
    war1644  
    OP
       2017-10-25 18:28:04 +08:00
    @silenceeeee 意识到了,应该自己想办法的,而不应该放到这来。哈哈哈
    KgM4gLtF0shViDH3
        9
    KgM4gLtF0shViDH3  
       2017-10-25 20:35:23 +08:00 via Android
    勇气可嘉老实的童鞋。
    lingo
        10
    lingo  
       2017-10-25 20:41:45 +08:00
    没见过这么耿直的 boy
    carlclone
        11
    carlclone  
       2017-10-25 21:14:08 +08:00   1
    我爬你的网站,遇到了一点问题,你能不能帮我解决一下? 头条员工:不如我直接把数据库发你一份吧
    callmexiaoliu
        12
    callmexiaoliu  
       2017-10-25 22:19:02 +08:00
    您好,请问您家里值钱的东西都放在哪儿了?
    还有:IC、IP、IQ 卡,统统告诉我密码。。。
    stabc
        13
    stabc  
       2017-10-25 22:31:35 +08:00   1
    “小姐你好,你这个裤链怎么打开?”
    em70
        14
    em70  
       2017-10-25 22:40:53 +08:00
    你把头条所有的内容抓下来,内容和标题对应关系不就一目了然了
    junbguistar
        15
    junbguistar  
       2017-10-25 23:14:45 +08:00
    哈哈哈哈哈哈哈
    WordTian
        16
    WordTian  
       2017-10-26 00:16:16 +08:00
    app 的话,一般可以抓包,获得 API。然后爬虫模拟发送 API 请求,获得返回值后对内容进行解析(一般是 json 格式),获得相应内容
    toono
        17
    toono  
       2017-10-26 08:36:54 +08:00
    直接问头条 API 来得痛快
    blackboar
        18
    blackboar  
       2017-10-26 08:44:23 +08:00
    或许没那么高科技,就是一篇文章发两次呢
    orvnge
        19
    orvnge  
       2017-10-26 09:00:57 +08:00
    头条抓别人。。你抓头条
    artandlol
        20
    artandlol  
       2017-10-26 09:13:19 +08:00
    给你块面包换取头条的爬虫技术,
    CodingPuppy
        21
    CodingPuppy  
       2017-10-26 11:04:21 +08:00
    我们客户最近上报一个问题,接听电话每次锁屏后放到口袋,屏幕都会自动亮起,经常会误操作把电话挂掉。
    调查了一下发现是每次通话灭屏,头条会启动一个 activity 导致亮屏然后又隐藏了。不知道是什么鬼
    CodingPuppy
        22
    CodingPuppy  
    &nbs;  2017-10-26 11:06:24 +08:00
    dashenbibi
        23
    dashenbibi  
       2017-10-26 11:41:30 +08:00
    这就厉害了~
    war1644
        24
    war1644  
    OP
       2017-10-26 13:10:24 +08:00
    @WordTian
    @blackboar
    @em70
    首先感谢三位的认真回答。其次根据我昨晚数据对比分析,有个 API 是可以以游客身份找到团队主页部分看不见的视频。

    嗯,我觉得这贴应该转交到爬虫讨论区。
    Msxx
        25
    Msxx  
       2017-10-26 13:40:30 +08:00
    ~.~歪,你们网站太难爬,麻烦把数据库打包一份发我。
    开玩笑~
    8355
        26
    8355  
       2017-10-26 14:00:30 +08:00
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     2769 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 25ms UTC 14:42 PVG 22:42 LAX 06:42 JFK 09:42
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86