V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
Mrrrrr10
V2EX  ›  Python

srcapy 已经有了一个代理池,写入了中间件,这个代理是随机切换的,也是秒切 ip,请问一下,如何做到请求 10 次再切换 ip?

  •  1
     
  •   Mrrrrr10 · 2018-09-16 12:31:15 +08:00 · 2538 次点击
    这是一个创建于 2260 天前的主题,其中的信息可能已经有所发展或是发生改变。

    请教有经验的大佬,给我说一说,谢谢啦

    7 条回复    2018-09-18 14:25:03 +08:00
    lihongjie0209
        1
    lihongjie0209  
       2018-09-16 12:43:09 +08:00
    最简单, 你给每个 IP 使用的时候计数一下, 切换的时候检测不就好了
    lasuar
        2
    lasuar  
       2018-09-16 13:21:59 +08:00
    scrapy 的 extension 中间件可以了解一下。
    Mrrrrr10
        3
    Mrrrrr10  
    OP
       2018-09-16 13:37:42 +08:00
    @lasuar 怎么重置次数呢
    Mrrrrr10
        4
    Mrrrrr10  
    OP
       2018-09-16 13:37:56 +08:00
    @lihongjie0209 怎么重置次数
    chinvo
        5
    chinvo  
       2018-09-16 13:54:36 +08:00 via iPhone
    第十次的时候把你的变量改为 0

    既然都自己写中间件了加个逻辑不难啊
    yuan10
        6
    yuan10  
       2018-09-17 00:32:57 +08:00   ❤️ 1
    中间件里写个__init__方法,定义一个属性 self.cnt ,process_request 里计数,cnt 达到 10 就置 0,同时切 ip,这应该很简单吧
    Mrrrrr10
        7
    Mrrrrr10  
    OP
       2018-09-18 14:25:03 +08:00
    @yuan10 老哥我爱你
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   991 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 19:42 · PVG 03:42 · LAX 11:42 · JFK 14:42
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.