V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
s1084796293
V2EX  ›  问与答

请问各位,新浪博客的图片如何爬取

  •  
  •   s1084796293 · 2021-04-16 16:39:50 +08:00 · 776 次点击
    这是一个创建于 1323 天前的主题,其中的信息可能已经有所发展或是发生改变。

    比如我想爬这个博客中的图片,http://blog.sina.com.cn/s/blog_eddd7d6b0102za2z.html?tj=1 但是我用 java 下载的时候,给我返回的是一个重定向

    邮件点击图片可以在新标签页中打开,然后复制地址在新的标签页中也可以打开,但是一刷新变了成了 302

    开始的时候感觉是请求头里面 referer 的原因,但是设置了也无效

    s1084796293
        1
    s1084796293  
    OP
       2021-04-16 19:08:33 +08:00
    已解决,原来重定向是告诉我去另外一个路径下载图片,而新的路径需要配置 referer
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2716 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 15:17 · PVG 23:17 · LAX 07:17 · JFK 10:17
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.