V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
zhihupron
V2EX  ›  问与答

哪里可以爬到大量的中国人脸图片?用于训练 GAN

  •  
  •   zhihupron · 2019-10-05 08:10:29 +08:00 · 7220 次点击
    这是一个创建于 1881 天前的主题,其中的信息可能已经有所发展或是发生改变。
    目前网络上公开的数据集都说欧美人脸。我想训练自己的 GAN 网络。
    生成的的人脸都是欧美人。我想训练大陆人脸。
    国内有没有类似公开的数据集?或者适合爬虫爬取的网站
    32 条回复    2019-10-07 05:08:20 +08:00
    GPLer
        1
    GPLer  
       2019-10-05 08:20:19 +08:00 via Android
    微博?
    sadfQED2
        2
    sadfQED2  
       2019-10-05 08:41:55 +08:00 via Android
    我以前的做法是去网上爬各种各样的图片,然后用网上现成的模型过滤,把没有人脸的删掉,同时做 resize 等预处理
    lishoujun
        3
    lishoujun  
       2019-10-05 09:08:10 +08:00 via Android
    91p**n
    ddhhh
        4
    ddhhh  
       2019-10-05 09:34:02 +08:00
    xx 直播封面
    ddhhh
        5
    ddhhh  
       2019-10-05 09:40:08 +08:00
    oubfgiar
        6
    oubfgiar  
       2019-10-05 10:04:18 +08:00 via iPhone
    给你提供一个思路,人事局,高校,各种继续教育系统。
    Danswerme
        7
    Danswerme  
       2019-10-05 10:04:39 +08:00 via Android
    xx 直播啥的不都是换头怪?
    lzhd24
        8
    lzhd24  
       2019-10-05 10:09:54 +08:00 via Android
    陌陌,探探。全是人脸。前提是技术到位,能爬的到:-)
    aneureka
        9
    aneureka  
       2019-10-05 10:23:27 +08:00 via Android   ❤️ 4
    有的,之前做 animate me 的时候了解过

    http://www.seeprettyface.com/mydataset_page2.html
    caomu
        10
    caomu  
       2019-10-05 10:44:24 +08:00 via Android   ❤️ 1
    @oubfgiar 这倒是一个思路,之前的教务系统,人像一寸照片不设权限,学号递增编号,直接可以拉下来。。。
    hkitdog
        11
    hkitdog  
       2019-10-05 10:53:26 +08:00 via iPhone
    探探
    chenchangjv
        12
    chenchangjv  
       2019-10-05 11:01:37 +08:00   ❤️ 25
    看楼上一些回答,真到了自己需要用的时候,也不会考虑他人的隐私
    xxx749
        13
    xxx749  
       2019-10-05 11:19:00 +08:00   ❤️ 1
    打开你头像的网站,关键词「 Chinese 」。不仅能合法爬到中国人脸还能顺带训练一波鉴黄模型
    wangfei324017
        14
    wangfei324017  
       2019-10-05 11:20:08 +08:00 via iPhone
    微博,商汤科技
    venster
        15
    venster  
       2019-10-05 12:15:37 +08:00 via Android
    可以参考一下 Facebook 最初是咋来的
    upczww
        16
    upczww  
       2019-10-05 12:20:36 +08:00 via iPhone
    @aneureka 感谢
    Rgwang
        17
    Rgwang  
       2019-10-05 12:26:04 +08:00 via Android
    现在都有美颜,除了身份系统都不真实
    Raynard
        18
    Raynard  
       2019-10-05 12:28:15 +08:00
    给你提供个骚操作,

    网上有卖别人丢的 SFZ 的。。。

    会给你一个网盘链接让你挑。。。
    zhangzhe532
        19
    zhangzhe532  
       2019-10-05 13:29:10 +08:00 via iPhone   ❤️ 1
    认真的吗?请问楼上出招的各位,是不把照片当隐私还是不把别人的照片当隐私?
    昨天才看到谷歌花钱采集流浪汉照片,到这都是爬别人提交的?
    https://m.baidu.com/sf_baijiahao/s?id=1646347330263271573&wfr=spider&for=pc
    dream7758522
        20
    dream7758522  
       2019-10-05 14:17:04 +08:00 via Android
    百元大钞
    jhdxr
        21
    jhdxr  
       2019-10-05 14:20:02 +08:00
    违法的手段上面说了一大堆了。其实不少数据公司也都有买(同样没有合理说明途径)

    最近严打隐私,这种东西不能合理说明来源的基本上就进去呆着吧
    xmoiduts
        22
    xmoiduts  
       2019-10-05 16:24:38 +08:00 via Android
    欧洲都不让用真人脸做训练了……为什么都是欧美人脸😂
    Nathanzheng
        23
    Nathanzheng  
       2019-10-05 18:38:23 +08:00
    就这还天天说别人大厂不尊重隐私,自己就干这勾当、、、
    iPhoneXI
        24
    iPhoneXI  
       2019-10-05 19:00:40 +08:00 via Android
    高校教务系统
    一堆漏洞
    gam2046
        25
    gam2046  
       2019-10-05 21:18:58 +08:00
    @Nathanzheng
    @zhangzhe532
    @chenchangjv

    大佬们,如果是在微博这样的互联网公开领域,抓取用户公开的自拍等,如果不考虑与新浪等运营方的 TOS,单纯就抓取者与信息发布者之间,是否有可能存在侵权关系呢?
    douglas1997
        26
    douglas1997  
       2019-10-05 21:25:44 +08:00
    自己用一个人脸检测识别算法扣吧。。
    Nathanzheng
        27
    Nathanzheng  
       2019-10-05 21:44:05 +08:00
    @gam2046 爬自拍不知道违法不违法不知道,但是爬别人系统偷人脸不道义是肯定的
    yangxin0
        28
    yangxin0  
       2019-10-05 21:47:44 +08:00 via iPhone
    爬别人的分分钟让你吃牢饭。
    zjsrucsj
        29
    zjsrucsj  
       2019-10-05 22:07:04 +08:00 via Android
    百合网,基本上头像都能过人脸算法,当初爬了几百万
    wdlth
        30
    wdlth  
       2019-10-05 22:13:41 +08:00
    黑入天网……
    rayhy
        31
    rayhy  
       2019-10-05 22:16:53 +08:00
    爬虫入刑的新闻有听说吗?收集数据前楼主最好确认下合规不合规。
    houlin
        32
    houlin  
       2019-10-07 05:08:20 +08:00 via Android   ❤️ 1
    谈隐私的时候头头是道,爬隐私的时候也是头头是道
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3304 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 11:57 · PVG 19:57 · LAX 03:57 · JFK 06:57
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.