You need to enable JavaScript to run this app. Azure中基于VM心跳缺失创建警报及故障自动重启的实现问题
优惠活动
大模型
产品
解决方案
定价
更多

Azure中基于VM心跳缺失创建警报及故障自动重启的实现问题

「查询未返回TimeGenerated列」报错解决方案

报错根因非常明确:当前版本Azure Log Analytics的日志告警创建流程,会对提交的查询做前置校验,要求最终输出的结果集必须包含时间类型的TimeGenerated列,才能通过规则创建检查。你用的参考查询在经过summarize聚合操作后,原生的TimeGenerated列已经被聚合计算,最终输出的字段只有Computer、_ResourceId、LastCall三个,不存在符合校验要求的TimeGenerated列,因此触发系统报错。

结合你需要检测15分钟无心跳VM的需求,修正后的可直接通过校验的查询代码如下:

// 检测近15分钟无心跳上报的活跃VM
// 仅筛选24小时内曾正常上报过心跳的设备,避免对已主动关机、释放的非长期运行VM触发误重启
Heartbeat 
| where TimeGenerated > ago(24h)
| summarize 
    LastHeartbeat = max(TimeGenerated)
    by Computer, _ResourceId
// 将聚合得到的最后一次心跳时间映射为告警校验要求的TimeGenerated列
| project TimeGenerated = LastHeartbeat, Computer, _ResourceId
// 筛选满足15分钟无心跳条件的故障VM
| where TimeGenerated < ago(15m)

这段查询调整的核心是通过project操作,把聚合计算得到的VM最后一次心跳时间,直接输出为标准格式的TimeGenerated列,完全满足告警规则的校验要求,同时保留了VM的资源ID字段,方便后续对接自动重启流程。

告警触发阈值的合理性判断

你设想的「结果数小于等于0」的触发逻辑完全不合理,属于方向搞反的配置错误:

  • 我们编写的查询最终输出的结果集,是「所有满足失联条件的故障VM清单」,结果集的行数=当前检测到的故障VM数量。
  • 如果设置阈值为「结果数<=0」,代表当查询没有返回任何故障VM时,反而触发告警:比如Log Analytics后端临时异常导致查询失败、返回空结果时,系统会误判为存在VM故障,进而触发无差别重启操作,会直接影响正常运行的业务负载。
  • 正确的触发阈值应当设置为结果数>=1,也就是只要检测到至少1台VM满足失联条件,就触发对应告警流程。
  • 避坑提示:如果要避免查询临时异常导致的误报,可以在查询逻辑最开头增加采集链路校验,只有当Log Analytics自身心跳数据正常上报时,才执行后续的失联判断,从逻辑上杜绝空结果触发的误告警。
其他可落地的故障VM自动重启实现方案
  • 直接使用VM Insights内置的「Agent无连接」信号创建告警:这类系统内置告警本身已经符合所有日志查询的校验规则,不需要手动调整查询逻辑,从源头避免查询列不匹配的报错。
  • 关联VM自动修复能力:将检测无心跳的告警信号,直接绑定VM维度的自动修复规则,不需要单独搭建自动化运行手册,触发后系统会自动校验VM当前的运行状态,再执行重启操作,避免对已经手动恢复的VM重复执行无意义的重启动作。
  • 扩充检测覆盖范围:在原生Heartbeat心跳的基础上,增加业务状态检测项——通过VM上的脚本定期检测关键业务进程、业务端口的运行状态,将结果写入Log Analytics,和原生心跳信号结合判断。这类方案可以覆盖“VM本身正常联网,但业务进程卡死处于假在线状态”的场景,比单纯靠VM心跳判断的故障检测更精准。
  • 增加二次校验环节:在自动重启动作触发前,设置1-2分钟的延迟,重新执行一次心跳查询,确认VM仍然处于失联状态后再执行重启,避免因为临时网络抖动导致的瞬时心跳丢失,触发不必要的重启。

内容的提问来源于stack exchange,提问作者lajarre。

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.11.01 16:06:07