Ubuntu 22.04服务器时钟频繁跳变（时间整体正确但会回跳）问题求助

我的服务器是Ubuntu系统，具体环境信息如下：

No LSB modules are available.
Distributor ID: Ubuntu
Description:    Ubuntu 22.04.4 LTS
Release:        22.04
Codename:       jammy
Linux lab01 6.5.0-26-generic #26~22.04.1-Ubuntu SMP PREEMPT_DYNAMIC Tue Mar 12 10:22:43 UTC 2 x86_64 x86_64 x86_64 GNU/Linux

我用timedatectl来做时间同步，但最近碰到了很诡异的问题：时钟会莫名跳变——有时候走得特别快，等系统检测到时间错误后，又会突然回跳回去。

比如我连续执行了两次date命令，中间只间隔了1秒，结果时间反而倒退了21秒：

lab@lab01:~$ date
Mon Mar 25 02:25:24 PM CET 2024
lab@lab01:~$ date
Mon Mar 25 02:25:03 PM CET 2024

我执行sudo timedatectl timesync-status查看同步状态，发现抖动（jitter）和偏移量（offset）数值都特别高，甚至达到几十秒，但我完全搞不懂这是为什么：

Server: 162.159.200.1 (0.pool.ntp.org)
Poll interval: 32s (min: 32s; max 34min 8s)
         Leap: normal
      Version: 4
      Stratum: 3
    Reference: A0E080C
    Precision: 1us (-25)
Root distance: 9.864ms (max: 5s)
       Offset: -22.284696s
        Delay: 3.924ms
       Jitter: 10.223410s
 Packet count: 53
    Frequency: +0.000ppm

有没有大佬能帮我分析下可能的原因，或者给点排查、解决的建议？

备注：内容来源于stack exchange，提问作者NicoCaldo