V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
爱意满满的作品展示区。
guodong110
V2EX  ›  分享创造

分享百度网盘爬虫源码

  •  
  •   guodong110 · 2016-12-22 11:42:51 +08:00 · 4740 次点击
    这是一个创建于 2900 天前的主题,其中的信息可能已经有所发展或是发生改变。

    源码:https://github.com/gudegg/yunSpider.git
    搜索站(之前域名太难记,新买了个):http://www.fastsoso.cn
    大家试试速度如何,听说百度 cdn 是减速 cdn

    24 条回复    2016-12-26 23:50:44 +08:00
    chroming
        1
    chroming  
       2016-12-22 12:40:34 +08:00
    用着百度 cdn 爬着百度网盘的资源…
    boro
        2
    boro  
       2016-12-22 12:54:31 +08:00 via iPhone
    是龟速
    helloccav
        3
    helloccav  
       2016-12-22 13:06:13 +08:00
    谢谢分享,可是爬到了也没用啊,下载龟速
    guodong110
        4
    guodong110  
    OP
       2016-12-22 13:31:23 +08:00
    @boro 很慢吗?
    xiuc001
        5
    xiuc001  
       2016-12-22 13:37:14 +08:00   ❤️ 1
    没什么用啊,搜到的资源全部下架了,爬虫更新频率不对
    vincenttone
        6
    vincenttone  
       2016-12-22 13:40:11 +08:00
    不错,谢楼主
    guodong110
        7
    guodong110  
    OP
       2016-12-22 13:44:34 +08:00
    @xiuc001 前几天刚爬的 下架我也没法 不可能实时爬 没那资源
    xiuc001
        8
    xiuc001  
       2016-12-22 14:44:00 +08:00
    @guodong110 定期更新把下架的去掉,如果能做到可以搜索到最新可用资源的话,那是相当好的
    Codewj
        9
    Codewj  
       2016-12-22 14:45:14 +08:00 via iPhone
    楼主,有些入门问题想咨询下,方便加个好友嘛
    guodong110
        10
    guodong110  
    OP
       2016-12-22 14:57:07 +08:00
    @Codewj 企鹅 873455041
    imxieke
        11
    imxieke  
       2016-12-22 15:50:38 +08:00
    合肥电信秒开
    boro
        12
    boro  
       2016-12-22 18:04:36 +08:00 via iPhone
    @guodong110 是的
    guodong110
        13
    guodong110  
    OP
       2016-12-22 19:53:10 +08:00
    @boro 什么宽带啊
    a87150
        14
    a87150  
       2016-12-22 20:31:34 +08:00
    nice
    boro
        15
    boro  
       2016-12-22 22:47:30 +08:00 via iPhone
    @guodong110 我是说百度 cdn ,不是你的网站啊。

    你的网站第一次打开稍慢。
    guodong110
        16
    guodong110  
    OP
       2016-12-22 22:57:14 +08:00
    @boro 我网站用了百度 cdn 呢
    mingyun
        17
    mingyun  
       2016-12-22 23:13:47 +08:00
    好评
    SuperFashi
        18
    SuperFashi  
       2016-12-22 23:26:27 +08:00
    不知道有没有爬有密码的链接呢?
    guodong110
        19
    guodong110  
    OP
       2016-12-22 23:58:54 +08:00 via Android
    @SuperFashi 加密都能爬 加密功能有何意义?
    SuperFashi
        20
    SuperFashi  
       2016-12-23 00:23:16 +08:00 via Android
    @guodong110 嘛,我的意思是,既然你使用的枚举法来看分享地址,那应该可以撞到加密链接吧,为什么不做一个用户-链接关联的呢?
    guodong110
        21
    guodong110  
    OP
       2016-12-23 07:44:42 +08:00 via Android
    @SuperFashi 不是,只能看到公开分享,已经做了用户链接关联
    guonning
        22
    guonning  
       2016-12-23 14:44:44 +08:00 via Android
    搜索挺快的
    Nicksxs
        23
    Nicksxs  
       2016-12-23 15:46:11 +08:00
    赞的
    danmary61
        24
    danmary61  
       2016-12-26 23:50:44 +08:00
    楼主感谢你啊,好棒,我这边速度快。
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2762 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 25ms · UTC 09:55 · PVG 17:55 · LAX 01:55 · JFK 04:55
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.