如何关联两个Splunk Web查询匹配carId异常的API请求响应日志
Splunk 关联查询异常请求与对应响应日志方案
原有查询问题说明
你之前的查询逻辑存在两个问题:
- 未使用括号控制逻辑运算符优先级,
AND优先级高于OR,原有查询实际返回的是「符合条件的请求日志+所有响应日志」,没有对响应日志做carId匹配 - 没有做请求和响应的carId关联逻辑,自然无法拿到对应匹配的两类日志
最优实现方案(无需子查询,性能更好)
因为你的日志是标准JSON结构,直接使用spath提取carId字段比正则更稳定,查询语句如下:
index=MyIndex* source="my/source/path/to/app.log" ("My Api Request" OR "My Api Response") | spath path=carId output=car_id # 标记存在carId为null的请求的目标carId分组 | eventstats values(eval(if(searchmatch("\"My Api Request\" AND isnull(car_id)"), 1, null()))) as is_target by car_id | where is_target=1 # 去重规则可自定义,如需每个carId每种日志类型仅保留一条,可改为 `dedup car_id, searchmatch("My Api Request")` | dedup _raw # 按时间戳正序排序,如需倒序改为 `sort 0 -_time` | sort 0 _time # 可自定义展示字段 | table _time, car_id, _raw
逻辑说明:
- 第一步先捞取所有目标范围内的请求、响应日志,缩小检索范围
- 用
spath直接从JSON结构提取carId字段,无需手写正则,兼容性更强 - 用
eventstats按carId分组,标记出所有存在「carId为null的请求」的carId分组 - 过滤后仅保留目标分组的所有日志,包含对应的异常请求和同carId的响应
- 最后完成去重、排序操作
子查询实现方案
如果你更习惯用子查询逻辑,也可以使用如下写法:
index=MyIndex* source="my/source/path/to/app.log" ("My Api Request" OR "My Api Response") # 子查询捞出所有存在异常请求的carId,用于外层过滤 [ search index=MyIndex* source="my/source/path/to/app.log" "My Api Request" "\"carId\":null" | spath path=carId output=car_id | fields car_id | format ] | dedup _raw | sort 0 _time
注意事项
如果你的Splunk已经提前配置了该数据源的JSON字段自动提取,可省略spath步骤,直接使用已经提取好的carId字段即可。如果carId为null时spath识别异常,可将判断逻辑调整为匹配原始日志的"carId":null字符串。
内容的提问来源于stack exchange,提问作者PainIsAMaster
相关产品推荐
相关产品推荐

