服务器 cpu ,磁盘 io 100% 占用, 无法 ssh 登录 应该怎么排查问题?

[seth19960929]

• 如图, 个人的服务器, cpu 磁盘 io100% 占用, 无法 ssh 连接上去

• 应该怎么查看是哪个进程引起的.

  • 重启之后就正常了, 但是重启之后有什么办法查看是因为什么原因的吗?

• 确认不是外人操作, 已经关闭密码登录只允许了公钥登录

[zsj1029]

竞价机器吗？有没有可能其他用户影响的

[seth19960929]

@zsj1029
看了 ucloud 后台显示的是: 快杰型 O, 不是共享的

[julyclyde]

看一下 console 有没有内核输出的错误信息

[pelloz]

大概率是有一个程序在狂写日志，你去找到这个不正常大小的日志就能找到对应的程序了

[seth19960929]

@julyclyde
@pelloz 有没有记录进程的排行的方式? 比如 2 s 记录一次

[julyclyde]

@seth19960929 你自己写一个呗，sleep2 循环看一遍/proc 再 sleep2

[nagisaushio]

有可能在 swap

[seth19960929]

@julyclyde 放弃这个，想找个成熟一点的方案
@nagisaushio 不应该直接干到 100% 吧

[jazzsama]

腾讯云搭的 qBittorrent 服务器，也遇到了 CPU 跑满的情况

重启一下就可以再次使用 SSH 登录

PS. 腾讯云重启特别慢，实测 15 min 以上

[seth19960929]

@jazzsama 有找到是什么进程问题吗

[creating]

我的腾讯云也遇到过好几次，IO 突然 100%，然后什么都不能操作，只能强制重启，重启时间也很长，
特别是在大量操作文件时遇到的概率大，没找到过原因，重启之后一切正常。

[samyucn234]

先 top 再 kill

[seth19960929]

@samyucn234 看描述, 服务器已经连接不了了, 而且我不是要 kill, 我是要找到是谁占用高

[corningsun]

atop 可以设置采集间隔，然后回溯到任意时间。