兄弟，这个情况我在运维老HP服务器的时候碰到过好多次，结合你说的从Windows Server 2003升级到2012 R2、控制台卡但5个RDP用户都流畅的细节，大概率是下面这几个原因，给你挨个拆解：

• 显卡驱动适配拉胯
  Windows Server 2003对老服务器的集成显卡基本是“凑合用”就行，但2012 R2开始对显示子系统要求严多了。你这台ML350的集成显卡（比如常见的Matrox G200eW），系统自带的通用驱动根本没开启硬件加速，所有画面渲染全靠CPU硬扛，能不卡吗？但RDP用的是远程桌面专属的虚拟驱动，跟物理显卡没关系，是专门针对远程场景优化的，所以远程操作就流畅。
  解决建议：去HP官网找对应ML350型号的Windows Server 2012 R2专用显卡驱动，别用系统自带的通用版。安装完去显示设置里确认下硬件加速有没有开启。

• 老KVM兼容性拖后腿
  你用的KVM要是年头久了，很可能对2012 R2的USB/视频协议支持不好。2012 R2的USB输入设备处理逻辑和2003完全不一样，有些老KVM模拟的USB键盘鼠标会频繁触发设备枚举或者中断，直接导致控制台响应变慢。而RDP是通过网络传输入信号，完全绕开了KVM的硬件层面，自然不受影响。
  解决建议：先试试把键盘鼠标直接插服务器本地USB口，不用KVM，看看还卡不卡。如果不卡，那就是KVM的锅——要么给KVM刷最新固件，要么换个支持新服务器系统的型号。

• 控制台会话资源优先级被压低
  Windows Server从2008开始，默认会给远程桌面会话分配更高的CPU和内存优先级，反而本地控制台会话的优先级更低。你这台老ML350硬件资源本来就有限，再加上5个RDP用户在跑，控制台的资源被挤占得厉害，操作自然卡顿。
  解决建议：打开任务管理器，找到控制台会话（一般是Session 0或者Session 1，看系统配置）里的explorer.exe和相关系统进程，把它们的优先级调到“高”试试。不过这是临时方案，长远来看最好给服务器加内存，毕竟2012 R2对内存的需求比2003高太多了。

• 显示参数不匹配显卡能力
  老KVM连接的显示器可能默认设置了很高的分辨率或者刷新率，而服务器的集成显卡在控制台模式下根本跑不动这么高的参数。但RDP会话的分辨率是由远程客户端设置的，一般不会超过客户端显示器的能力，而且是虚拟渲染，所以没问题。
  解决建议：在控制台模式下，把显示分辨率降到1024x768或者更低，看看卡顿有没有缓解。如果有效，再慢慢调到合适的分辨率，同时检查显示器和KVM的刷新率设置，别超过服务器显卡支持的范围。

内容的提问来源于stack exchange，提问作者Daniel