V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
aaronzheng
V2EX  ›  程序员

中秋节,自己的消遣活动就是写了个爬虫程序来爬游戏王的卡片

  •  
  •   aaronzheng · 2015-09-27 19:07:02 +08:00 · 3600 次点击
    这是一个创建于 3344 天前的主题,其中的信息可能已经有所发展或是发生改变。
    如题。。。目前已经爬了 400 张卡了。。。貌似有 7000+张卡,估计跑多 1 小时就可以爬完了。。。真的觉得自己好蛋疼。。。

    之后再把,文字也爬了。然后自己写个好看点的页面,都 post 出来吧。。。 想起来就觉得今晚应该很忙,但是感觉怪怪的。。。🐶🐱

    17 条回复    2015-09-28 14:27:07 +08:00
    liqingcan
        1
    liqingcan  
       2015-09-27 19:13:59 +08:00 via Android
    good
    zhujinguan11
        2
    zhujinguan11  
       2015-09-27 19:48:10 +08:00
    想起以前一群人放学后拿着盗版卡组,桌子扑上盗版对阵图,然后就开始杀起来了。

    最可惜的是当初差一张被封印的身体就集全黑暗大法师了 =。=
    aaronzheng
        3
    aaronzheng  
    OP
       2015-09-27 20:49:02 +08:00
    @zhujinguan11 哈哈哈,我初中和高中都一直有玩游戏王。。。初中玩的是盗版卡的,高中玩了正版,但是因为没钱买犀利的卡,所以最后也是经常被切。。。

    目前终于把所有卡的图都爬完了。一共爬了 7264 张。。。 开始进入下一步。。。
    oott123
        4
    oott123  
       2015-09-27 20:51:08 +08:00 via Android
    喔,这个数据库我有(。
    oott123
        5
    oott123  
       2015-09-27 20:54:38 +08:00


    当年不是有个狐查么。然后它自带一个 mdb 格式的数据库啊,还带图包下载的……
    aaronzheng
        6
    aaronzheng  
    OP
       2015-09-27 20:58:53 +08:00
    @oott123 啊啊啊啊啊啊 真的么。。。我也是闲着蛋痛,自己才搞的。 有网页查询和 ios 查询的,但是那个界面实在太丑了,而且用起来完全不是用户出发的。。。所以才开始写个自己风格的。。。

    求数据库:)这样,我就不用再爬文字了。。。目前爬完图片,准备开始写页面了。。。
    Monad
        7
    Monad  
       2015-09-27 21:02:51 +08:00 via iPhone
    blue eyes white dragon
    oott123
        8
    oott123  
       2015-09-27 21:09:16 +08:00
    http://www.ocgsoft.cn/downloads/androidkacha.html
    安卓这个卡查不就有么
    桌面的狐查我找不太着了……
    oott123
        9
    oott123  
       2015-09-27 21:10:33 +08:00
    http://www.ocgsoft.cn/downloads/26.html
    你看,卡图包,用得着自己爬么……
    oott123
        10
    oott123  
       2015-09-27 21:13:54 +08:00
    http://pan.baidu.com/share/home?uk=788809508#category/type=0
    找到了狐查的下载。这个数据库的密码是 [email protected]
    mc468ma
        11
    mc468ma  
       2015-09-27 21:39:31 +08:00
    ygopro 不错,可以试试看。
    cszhiyue
        12
    cszhiyue  
       2015-09-27 22:05:12 +08:00 via Android
    @mc468ma 哈哈有时还上去玩。。发现自己已经落后太多。。同调,超量。。
    madamros
        13
    madamros  
       2015-09-27 22:48:06 +08:00
    你好,同样蛋疼的我也在写一个爬虫程序(想把全校同学的照片和个人信息爬下来……),不过我在一步上遇到一点问题不知可否请教你下!
    1002149271
        14
    1002149271  
       2015-09-27 23:11:42 +08:00
    这个是用什么代码写的?
    aabbccli
        15
    aabbccli  
       2015-09-27 23:25:06 +08:00
    用的 crawler4j ?
    taxiangdeni
        16
    taxiangdeni  
       2015-09-28 12:53:49 +08:00 via iPhone
    我只看出来楼主单身!
    honam
        17
    honam  
       2015-09-28 14:27:07 +08:00
    我只看出来楼主单身!
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2552 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 28ms · UTC 01:40 · PVG 09:40 · LAX 17:40 · JFK 20:40
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.