推荐学习书目
› Learn Python the Hard Way
Python Sites
› PyPI - Python Package Index
› http://diveintopython.org/toc/index.html
› Pocoo
值得关注的项目
› PyPy
› Celery
› Jinja2
› Read the Docs
› gevent
› pyenv
› virtualenv
› Stackless Python
› Beautiful Soup
› 结巴中文分词
› Green Unicorn
› Sentry
› Shovel
› Pyflakes
› pytest
Python 编程
› pep8 Checker
Styles
› PEP 8
› Google Python Style Guide
› Code Style from The Hitchhiker's Guide
python3 + gunicorn(多进程) + rq + subprocess 程序莫名 killed
taomujian · 2022-01-13 17:05:14 +08:00 · 1839 次点击这是一个创建于 827 天前的主题，其中的信息可能已经有所发展或是发生改变。
用 gunicorn 部署的一个程序,队列使用 rq,每个 worker 里调用 subprocess.Popen.communicate 去执行 go 程序,日志会保存到 log 文件,然后 python 读取 log 进行处理.当 gunicorn 配置文件中设置进程为多个时,rq 的日志文件会有警告 Lock already taken - skipping run,与此同时还有一条日志是 killed,go 程序就会被终止,python 也读取不了日志.当 gunicorn 配置文件中设置进程为 1 时则没有这个问题,这是哪里出问题了？
 |
1
zhoudaiyu 2022-01-13 17:21:33 +08:00
https://github.com/rq/rq-scheduler/issues/257 可以看看这个 xd 的自问自答里面的两个 here
|
 |
2
taomujian OP @zhoudaiyu 看过了，并没有什么解决方法，只是说 Lock already taken - skipping run 是一个特性。。。。
|
 |
3
corvofeng 2022-01-13 18:00:42 +08:00
killed 是不是容器内存满了, 进程被停了
|
|
4
taomujian OP @corvofeng 有可能，不过运行的程序都是在主机上，只有 es,mongodb,redis 用的 docker,我把 es 切换到主机上
|
 |
5
julyclyde 2022-01-14 12:00:38 +08:00
Killed 十有八九都是内存满。你看 dmesg 吧
|
Select Language