CloudWatch Agent日志出现"Value cannot be negative"报错的原因及来源排查

该警告由CloudWatch Agent上报指标时的校验逻辑触发：CloudWatch服务不支持接收负数值的指标数据，当Agent采集到的指标值为-1时，会直接丢弃该指标并打印这条警告。
常见触发场景包括：

• 自定义采集脚本执行出错，返回了-1的异常值
• 内置系统指标采集模块读取内核文件（/proc、/sys路径下文件）时解析异常，得到负数值
• 计数器类型指标计算增量/速率时，前一次采集的计数器数值大于后一次（比如计数器被重置），计算得到负的差值
• 指标转换规则配置错误，正常的数值被转换为负数

• 调高Agent日志级别到debug：修改CloudWatch Agent配置文件的agent配置段，添加"log_level": "debug"，重启Agent后，debug日志会输出该负数值对应的指标名称、采集源信息，直接定位到对应的采集项
• 导出现有生效配置核对：执行命令/opt/aws/amazon-cloudwatch-agent/bin/amazon-cloudwatch-agent-ctl -a get-config，查看所有已配置的采集项，逐个排查对应采集逻辑
• 验证自定义采集脚本：如果配置了自定义脚本指标采集，手动执行对应脚本，查看输出内容是否包含-1的异常值
• 验证系统指标采集源：如果是内置系统指标采集，手动读取对应数据源文件（比如/proc/diskstats、/proc/net/dev等），检查是否存在异常负数值
• 二分法缩小范围：临时注释部分采集配置，重启Agent观察警告是否消失，逐步缩小范围直到定位到异常采集项
• 检查指标计算规则：如果配置了指标增量、速率计算规则，检查是否有计数器重置导致差值为负的情况，可临时关闭差值计算验证警告是否消失

内容的提问来源于stack exchange，提问作者RubenLaguna