如何使用LogQL查询Loki中JSON日志的Top N reason字段高频取值
统计Loki JSON日志中Top N reason取值的LogQL实现
核心查询语句
你可以直接使用如下LogQL实现需求,按需替换其中的占位符即可:
topk(N, sum by (reason) (count_over_time({你的日志筛选标签} | json reason="message.reason" [$__range])))
语句拆解说明
{你的日志筛选标签}:替换为你实际用于定位日志范围的标签条件,例如{app="api-gateway", env="production"}| json reason="message.reason":调用Loki内置JSON解析器,将日志中嵌套的message对象下的reason字段提取为临时标签reasoncount_over_time( ... [$__range] ):统计指定时间范围内每个reason对应的日志条数,$__range是Grafana内置变量,会自动读取你面板选择的时间范围,也可替换为固定时长如30m、1dsum by (reason) (...):按reason维度聚合统计结果,避免其他标签导致统计值被拆分topk(N, ...):将N替换为你要取的排名数量(例如取前5就替换为5),返回频次最高的前N个reason取值
可运行示例
以下是统计近24小时生产环境支付服务中出现频次Top 10的reason的具体语句:
topk(10, sum by (reason) (count_over_time({service="pay", env="prod"} | json reason="message.reason" [24h])))
常见优化点
如果你采集的日志中存在部分缺失
reason字段的脏数据,可以在解析后追加过滤条件排除空值,避免干扰统计结果:topk(10, sum by (reason) (count_over_time({service="pay", env="prod"} | json reason="message.reason" | reason != "" [24h])))如果你需要同时查看每个reason对应的具体出现次数,在Grafana中使用该查询时选择「Table」类型面板即可展示完整的取值+频次对应关系。
内容的提问来源于stack exchange,提问作者Kobalelovx
相关产品推荐
相关产品推荐

