如何用IA32_PERFEVTSELx/IA32_PMCx MSR对估算并解决Intel i7 6700的L3缓存缺失过高问题？

算力阿峰

2026-5-20

针对你在Intel Skylake（i7-6700）Linux主机上通过IA32_PERFEVTSELx和IA32_PMCx MSR统计L3缓存缺失的需求，我来梳理下你的思路并补充关键细节，帮你更准确地实现这个监控：

核心配置验证

你目前的配置方向是完全正确的，先拆解下你写入IA32_PERFEVTSEL1（0x187）的0x41412E：

事件选择码（bits 7-0）：0x2E：对应Skylake PMU的OFFCORE_RESPONSE_0事件，专门用于统计缓存与外部内存交互的响应情况
UMask（bits 15-8）：0x41：这个组合精准指定了统计类型——0x40代表"LLC Miss"（L3缓存缺失），0x01代表请求类型为"Demand Data Read"，所以整体是统计用户空间下由数据读请求触发的L3缓存缺失
位16（用户模式位）：置1：只统计用户空间的指令/数据访问，不会包含内核态操作产生的缓存缺失
位22（计数器启用位）：置1：激活PMC1计数器开始累计事件数

读取IA32_PMC1（0xC2）是正确的，它和IA32_PERFEVTSEL1一一绑定，负责存储该配置下的事件累计值。

实现关键注意事项

这些细节能帮你避免常见的计数误差或功能异常：

CPU核心绑定：PMC是每个CPU核心独立的硬件计数器，如果你的内核定时器在不同核心上调度执行，读取到的只是当前核心的计数，而非全局总和。建议要么把定时器绑定到固定核心，要么遍历所有核心分别统计后求和。
溢出处理：Skylake的PMC是40位计数器，当L3缺失率极高时，每秒的计数可能超过2^{40，导致计数器溢出归零。每次读取后计算差值时，要判断当前值是否小于上次值，如果是，就加上`0x1000000000ULL`（2}40）来修正溢出后的实际差值。
避免计数器冲突：确保没有其他工具（比如perf）同时占用IA32_PERFEVTSEL1和IA32_PMC1，否则会导致计数混乱。可以在初始化时读取IA32_PERFEVTSEL1的值，检查是否已有其他配置。
高精度定时：普通内核定时器误差较大，建议使用hrtimer（高精度定时器）来实现1秒的定时上报，保证统计时间窗口的准确性。

简化代码示例

这里给你一个基础的内核模块实现，包含定时器、MSR读写和差值计算逻辑：

#include <linux/module.h>
#include <linux/hrtimer.h>
#include <linux/ktime.h>
#include <asm/msr.h>

#define PERFEVTSEL1_MSR 0x187
#define PMC1_MSR 0xC2
#define L3_MISS_EVENT_CONFIG 0x41412E

static struct hrtimer l3_miss_timer;
static u64 last_pmc_count = 0;

static enum hrtimer_restart l3_miss_timer_cb(struct hrtimer *timer) {
    u64 current_count;
    u64 miss_count;

    // 读取当前PMC1的累计值
    rdmsrl(PMC1_MSR, current_count);

    // 计算每秒的缺失数，处理40位计数器溢出
    if (current_count >= last_pmc_count) {
        miss_count = current_count - last_pmc_count;
    } else {
        miss_count = (0x1000000000ULL - last_pmc_count) + current_count;
    }

    pr_info("[L3 Miss Monitor] User space demand read misses: %llu\n", miss_count);
    last_pmc_count = current_count;

    // 重新设置定时器，1秒后再次触发
    hrtimer_forward_now(timer, ms_to_ktime(1000));
    return HRTIMER_RESTART;
}

static int __init l3_miss_monitor_init(void) {
    // 配置PERFEVTSEL1 MSR，启用L3缺失计数
    wrmsrl(PERFEVTSEL1_MSR, L3_MISS_EVENT_CONFIG);

    // 初始化PMC计数器为0
    wrmsrl(PMC1_MSR, 0);
    last_pmc_count = 0;

    // 初始化高精度定时器
    hrtimer_init(&l3_miss_timer, CLOCK_MONOTONIC, HRTIMER_MODE_REL);
    l3_miss_timer.function = l3_miss_timer_cb;
    hrtimer_start(&l3_miss_timer, ms_to_ktime(1000), HRTIMER_MODE_REL);

    pr_info("L3 Cache Miss Monitor initialized\n");
    return 0;
}

static void __exit l3_miss_monitor_exit(void) {
    hrtimer_cancel(&l3_miss_timer);
    pr_info("L3 Cache Miss Monitor exited\n");
}

module_init(l3_miss_monitor_init);
module_exit(l3_miss_monitor_exit);
MODULE_LICENSE("GPL");

额外优化建议

如果需要统计所有类型的L3缓存缺失（包括写请求、指令读取等），可以调整UMask为0x4F，覆盖更多请求类型。
若要监控所有核心的L3缺失，可以使用on_each_cpu函数，在每个核心上独立配置MSR并读取计数，最后汇总所有核心的结果。

内容的提问来源于stack exchange，提问作者nickeys