哪里可以爬到大量的中国人脸图片?用于训练 GAN - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
zhihupron
V2EX    问与答

哪里可以爬到大量的中国人脸图片?用于训练 GAN

  •  
  •   zhihupron 2019-10-05 08:10:29 +08:00 7643 次点击
    这是一个创建于 2206 天前的主题,其中的信息可能已经有所发展或是发生改变。
    目前网络上公开的数据集都说欧美人脸。我想训练自己的 GAN 网络。
    生成的的人脸都是欧美人。我想训练大陆人脸。
    国内有没有类似公开的数据集?或者适合爬虫爬取的网站
    32 条回复    2019-10-07 05:08:20 +08:00
    GPLer
        1
    GPLer  
       2019-10-05 08:20:19 +08:00 via Android
    微博?
    sadfQED2
        2
    sadfQED2  
       2019-10-05 08:41:55 +08:00 via Android
    我以前的做法是去网上爬各种各样的图片,然后用网上现成的模型过滤,把没有人脸的删掉,同时做 resize 等预处理
    lishoujun
        3
    lishoujun  
       2019-10-05 09:08:10 +08:00 via Android
    91p**n
    ddhhh
        4
    ddhhh  
       2019-10-05 09:34:02 +08:00
    xx 直播封面
    ddhhh
        5
    ddhhh  
       2019-10-05 09:40:08 +08:00
    oubfgiar
        6
    oubfgiar  
       2019-10-05 10:04:18 +08:00 via iPhone
    给你提供一个思路,人事局,高校,各种继续教育系统。
    Danswerme
        7
    Danswerme  
       2019-10-05 10:04:39 +08:00 via Android
    xx 直播啥的不都是换头怪?
    lzhd24
        8
    lzhd24  
       2019-10-05 10:09:54 +08:00 via Android
    陌陌,探探。全是人脸。前提是技术到位,能爬的到:-)
    aneureka
        9
    aneureka  
       2019-10-05 10:23:27 +08:00 via Android   4
    有的,之前做 animate me 的时候了解过

    http://www.seeprettyface.com/mydataset_page2.html
    caomu
        10
    caomu  
       2019-10-05 10:44:24 +08:00 via Android   1
    @oubfgiar 这倒是一个思路,之前的教务系统,人像一寸照片不设权限,学号递增编号,直接可以拉下来。。。
    hkitdog
        11
    hkitdog  
       2019-10-05 10:53:26 +08:00 via iPhone
    探探
    chenchangjv
        12
    chenchangjv  
       2019-10-05 11:01:37 +08:00   25
    看楼上一些回答,真到了自己需要用的时候,也不会考虑他人的隐私
    xxx749
        13
    xxx749  
       2019-10-05 11:19:00 +08:00   1
    打开你头像的网站,关键词「 Chinese 」。不仅能合法爬到中国人脸还能顺带训练一波鉴黄模型
    wangfei324017
        14
    wangfei324017  
       2019-10-05 11:20:08 +08:00 via iPhone
    微博,商汤科技
    venster
        15
    venster  
       2019-10-05 12:15:37 +08:00 via Android
    可以参考一下 Facebook 最初是咋来的
    upczww
        16
    upczww  
       2019-10-05 12:20:36 +08:00 via iPhone
    @aneureka 感谢
    Rgwang
        17
    Rgwang  
       2019-10-05 12:26:04 +08:00 via Android
    现在都有美颜,除了身份系统都不真实
    IsA26hN4DcQDS7Z9
        18
    IsA26hN4DcQDS7Z9  
       2019-10-05 12:28:15 +08:00
    给你提供个骚操作,

    网上有卖别人丢的 SFZ 的。。。

    会给你一个网盘链接让你挑。。。
    zhangzhe532
        19
    zhangzhe532  
       2019-10-05 13:29:10 +08:00 via iPhone   1
    认真的吗?请问楼上出招的各位,是不把照片当隐私还是不把别人的照片当隐私?
    昨天才看到谷歌花钱采集流浪汉照片,到这都是爬别人提交的?
    https://m.baidu.com/sf_baijiahao/s?id=1646347330263271573&wfr=spider&for=pc
    dream7758522
        20
    dream7758522  
       2019-10-05 14:17:04 +08:00 via Android
    百元大钞
    jhdxr
        21
    jhdxr  
       2019-10-05 14:20:02 +08:00
    违法的手段上面说了一大堆了。其实不少数据公司也都有买(同样没有合理说明途径)

    最近严打隐私,这种东西不能合理说明来源的基本上就进去呆着吧
    xmoiduts
        22
    xmoiduts  
       2019-10-05 16:24:38 +08:00 via Android
    欧洲都不让用真人脸做训练了……为什么都是欧美人脸
    Nathanzheng
        23
    Nathanzheng  
       2019-10-05 18:38:23 +08:00
    就这还天天说别人大厂不尊重隐私,自己就干这勾当、、、
    iPhoneXI
        24
    iPhoneXI  
       2019-10-05 19:00:40 +08:00 via Android
    高校教务系统
    一堆漏洞
    gam2046
        25
    gam2046  
       2019-10-05 21:18:58 +08:00
    @Nathanzheng
    @zhangzhe532
    @chenchangjv

    大佬们,如果是在微博这样的互联网公开领域,抓取用户公开的自拍等,如果不考虑与新浪等运营方的 TOS,单纯就抓取者与信息发布者之间,是否有可能存在侵权关系呢?
    douglas1997
        26
    douglas1997  
       2019-10-05 21:25:44 +08:00
    自己用一个人脸检测识别算法扣吧。。
    Nathanzheng
        27
    Nathanzheng  
       2019-10-05 21:44:05 +08:00
    @gam2046 爬自拍不知道违法不违法不知道,但是爬别人系统偷人脸不道义是肯定的
    yangxin0
        28
    yangxin0  
       2019-10-05 21:47:44 +08:00 via iPhone
    爬别人的分分钟让你吃牢饭。
    zjsrucsj
        29
    zjsrucsj  
       2019-10-05 22:07:04 +08:00 via Android
    百合网,基本上头像都能人脸算法,当初爬了几百万
    wdlth
        30
    wdlth  
       2019-10-05 22:13:41 +08:00
    黑入天网……
    rayhy
        31
    rayhy  
       2019-10-05 22:16:53 +08:00
    爬虫入刑的新闻有听说吗?收集数据前楼主最好确认下合规不合规。
    houlin
        32
    houlin  
       2019-10-07 05:08:20 +08:00 via Android   1
    谈隐私的时候头头是道,爬隐私的时候也是头头是道
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     2743 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 26ms UTC 13:58 PVG 21:58 LAX 06:58 JFK 09:58
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86