Loki(日志聚合系统)

Loki是 Grafana Labs 推出的开源水平可扩展日志聚合系统,常被称为面向日志的 Prometheus,以低成本、易运维为核心设计目标。

概述

Loki 于 2018 年发布,受 Prometheus 启发。与 Elasticsearch 对日志做全文索引不同,Loki 只为日志流的标签(label)建立索引,而日志正文以压缩块形式存储在对象存储中。这一取舍显著降低了索引开销和存储成本,使其成为经济实惠的日志方案。

核心原理

• 标签索引:仅索引日志流的元数据标签,不做全文倒排索引。
• 日志流:相同标签集合的日志被归为一条流,按时间顺序存储。
• 对象存储:压缩后的日志块存于 S3 等对象存储,成本低廉。
• LogQL:提供类似 PromQL 的查询语言,可按标签筛选并从内容中提取信息。
• 与 Grafana 集成:日志与指标可在同一仪表盘中关联查看。

应用场景

Loki 特别适合已经使用 Prometheus 与 Grafana 的团队,可复用相同的标签体系与告警生态,实现指标与日志的统一观测。对于日志量大但预算有限的组织,Loki 的低存储成本是一大吸引力。它常与 Promtail、Vector 等采集器配合收集容器与主机日志。

常见问题

问:Loki 能替代 Elasticsearch 做日志分析吗?答:在按标签筛选、成本敏感的场景更有优势;但若高度依赖复杂的全文检索,Elasticsearch 仍更强。

问:为什么 Loki 更省钱?答:它不建全文索引,索引数据量小,并把日志本体放到廉价对象存储,因此整体存储与运维成本更低。