ジッタに関しては一定変動のジッタに関してはPLL、SRCなどのフィルタ等で除去できるでしょう。
問題になるのは周波数範囲で+-Δする変動ですね。
これは環状になっている鉄道で10分間隔で運行している電車が10分遅れると利用客からは遅れがないように感じる。
問題なのは遅れが5分になったり7分になったり±で変動する場合ですね。
もしジッタでも一定の範囲でのずれならDCアンプのオフセット調整みたいにあらかじめずれの反対方向に補整する。
それ以前に+-Δの変動なしに+方向、-方向に一定のずれなら聞いていて判断できないかもしれないですね。