V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member Sign In
• 请不要在回答技术问题时复制粘贴 AI 生成的内容
This topic created in 1656 days ago, the information mentioned may be changed or developed.
有 7 台服务器在运行，使用了阿里云的日志服务 SLS，但 SLS 用于报警还行，平时查 bug 要前前后后看几十行甚至上百行日志，7 台机器来回看有点麻烦。 有没有什么好的手段把日志按时间戳聚合起来， 比如每分钟上传到一个统一的服务器上，然后写个脚本排一下序。 但一个日志文件有几百 MB，这个方式有点慢。
 |
1
fengpan567 Oct 22, 2021  2
elk
|
 |
2
37Y37 Oct 22, 2021
我们用的 elk，开发查起来得心应手
|
 |
3
mtzhjsnv Oct 22, 2021
|
 |
4
yisheyuanzhang Oct 22, 2021
filbeat > redis/kafka > elk 用起来很顺畅
|
 |
5
aeli Oct 22, 2021 1
loki + promtail 轻量的多，更适合日志查询
|
 |
6
securityCoding Oct 22, 2021 1
正好刚从阿里云 sls 切回自建日志平台,sls 不好用费用也高
filebeats->es->kibana 体验比 sls 高两个级别, 文档无比清晰搭起来很快 |
 |
7
kingzeus Oct 22, 2021
elk
|
 |
8
CainWang Oct 22, 2021
基础的查询 bug sls 也能满足的 前提是日志规范；比不上 kibana 但是也差不了太多
|
 |
9
zanxj Oct 22, 2021
无脑 ELK
|
 |
10
killva4624 Oct 22, 2021
轻度 loki，重度 elk，所以直接 elk 吧。
|
 |
11
bruce0 Oct 22, 2021
filebeat + Logstash
|
 |
12
yicong135 Oct 22, 2021
轻量级 Seq
https://datalust.co/seq |
 |
14
jellyspot Oct 22, 2021
如果是容器环境，efk 吧
|
 |
15
shanghai1943 Oct 22, 2021
@yicong135 #12 看起来挺不错👍
|
 |
16
basefas Oct 22, 2021
都打到一个日志库里不就行了？
|
 |
17
Hanggi Oct 22, 2021
elk 一套占多少资源啊，CPU, memory
|
 |
18
BQsummer Oct 22, 2021
我们是从 graylog 迁到 sls 的，感觉还是 graylog 好用
|
 |
19
hdfg159 Oct 22, 2021 via iPhone
用 graylog
|
 |
21
kaikai5601 Oct 22, 2021 via iPhone
你都用 sls 了还有啥不方便的？？比 elk 方便，就是对标 elk 的
|
 |
23
huangzxx Oct 23, 2021
推荐 ELK ，all -> kafka -> logstash -> es -> kibana
|
 |
24
fucku Oct 24, 2021
这大于号是什么意思?
比如 -> > |
|
25
securityCoding Oct 24, 2021
@Hanggi 主要是 ES 集群吃资源，数据量不大的话 3 台 4u16g 机器足够
|
 |
26
homie2018 OP @kaikai5601 主要是不太熟悉，比如通过 taskid abcd123efg 查所有相关的日志，不知道在控制台怎么使用，他们好像提供了类似 SQL 的句法，但我更倾向于在终端使用 grep, awk, sed 等命令进行查询。
|
Select Language