服务器时间差了八小时:内核时钟、进程环境与 cron 时区的六步排查

一、从一次真实的半夜事故说起

上个月凌晨两点,运维群里弹出一条告警:UTC 时间和北京时间差了八个小时的定时任务,在错误的时间全量跑了一遍数据同步。事后复盘,问题既不在脚本也不在数据库,而是三个月前换服务器时,PHP 的 timezone 配置没有被一起迁移过去。这台机器本身是 UTC,之前的机器是 Asia/Shanghai,平时看不出来,直到一条凌晨执行的 cron 才把问题暴露出来。

这类问题在小站运维里非常典型:一个小配置分散在六七个位置,任何一个位置没对齐,都会在某个特定时刻以难以理解的方式爆出来。时间就是其中最麻烦的一个,因为它的表现不是报错,而是「数据看着对但时间不对」,很容易被当成业务逻辑 bug 排查好几天。

这篇把我自己在十几台机器上踩过的坑整理成六步,按从下往上的顺序:内核时钟与硬件时钟、系统时区、进程环境、数据库时区、应用层时区、以及定时任务的时间语义。每一步都有对应的命令与判据,照着走一遍,基本能排掉绝大多数时区问题。

二、第一步:内核时钟与硬件时钟是不是同一个时间

Linux 上有两个时钟:一个是内核维护的系统时钟,一个是主板上的硬件时钟(RTC)。系统启动时从 RTC 读一次,之后由 NTP 或 chrony 持续校准。问题往往出在两者的时区假设不一致:RTC 可能是本地时间,也可能被设成了 UTC,而内核默认把 RTC 当作 UTC 读取。

判据非常直接:分别打印系统时间与硬件时间,看两者相差多少。如果差了整整八小时或者一个时区偏移,说明 RTC 被设成了本地时间而系统按 UTC 解释它,或者反过来。这个差异不会影响运行中的进程,但会影响一次重启后的初始时间,以及在虚拟化环境里的快照恢复。

# 系统时钟 vs 硬件时钟
timedatectl status
hwclock --show --verbose

# 如果 RTC 记录的是本地时间,明确告诉系统
timedatectl set-local-rtc 0   # 推荐:RTC 存 UTC

除了「差八小时」这种明显症状,还有一种更隐蔽的情况:系统时钟跑偏但不报警。原因是 chrony 或 ntpd 没有在跑,或者被防火墙挡住了 123 端口。判断方法是看时间同步服务是否 active,以及 timedatectl 输出里的 System clock synchronized 字段。

如果这个字段是 no,先别急着查 NTP 配置,先确认 123 端口出得去。很多云服务器默认在安全组里不放行 UDP 123,导致 NTP 永远同步不上,时钟每天漂几百毫秒,一个月下来能差十几秒。对定时任务影响不大,但对日志排序和分布式一致性影响很大。

三、第二步:系统时区,一条命令定生死

系统时区决定了 date 命令的输出、日志里的时间戳、以及所有「没有显式指定时区」的程序的默认行为。设置方法只有一条命令,但真正的问题是:设置完之后,已经运行的服务不会自动感知变化。

因为时区文件是在进程启动时读取的,改了 /etc/localtime 之后,已经在跑的 Nginx、PHP-FPM、MySQL 仍然用旧时区,直到被 reload 或 restart。这是最常见的「明明改了却没生效」的原因。判断方法是看进程的启动时间:如果进程的启动时间早于你修改时区的时间,那它一定还是旧时区。

# 设置系统时区
timedatectl set-timezone Asia/Shanghai
timedatectl status | grep -E 'Time zone|Local time'

# 看进程是否在改时区之后启动过
ps -o pid,lstart,comm -C nginx,php-fpm,mysqld

还有一个小坑:某些容器镜像里没有 /usr/share/zoneinfo 目录,或者在构建时被删掉了,导致 timedatectl 或 TZ 环境变量指向的时区文件不存在,程序静默回退到 UTC。判断方法是直接检查文件是否存在,而不是相信配置写了什么。

如果你是 KVM 或云主机用户,还要注意宿主机的时钟漂移会传递到虚拟机。虚拟机的时钟同步最好用 chrony 而不是 ntpd,因为 chrony 对时钟跳变的处理更宽容,在虚拟机被暂停再恢复的场景下更稳定。

四、第三步:进程环境里的 TZ 变量

TZ 环境变量是第二层覆盖,优先级高于系统时区。它有三个常见来源:systemd 服务的 Environment 配置、Docker 容器的 -e TZ= 参数、以及 shell 启动脚本里 export 的变量。三者任一存在,都会覆盖 /etc/localtime 的设置。

所以「系统时区明明对了,PHP 里还是 UTC」这种情况,八成是某个服务的 unit 文件里写死了 TZ=UTC。检查方法是从进程的 /proc/PID/environ 里读出真实生效的环境变量,这是唯一可信的来源,不要只看配置文件里写了什么。

# 读出进程真正生效的 TZ 值
tr '\0' '\n' 

实践中最稳的做法是:全站用 DATETIME 存 UTC,在应用层做转换;或者全站统一用 +08:00 并确保服务器、会话、应用三处一致。最怕的是混着用,一部分表用 TIMESTAMP 一部分用 DATETIME,半年后没人说得清某个字段到底是什么语义。

判断某个字段是不是 TIMESTAMP,一条 SHOW CREATE TABLE 就能看出来。如果一张表里两种类型混用,建议在文档里明确标注,并且所有新增表统一一种。改造老表的成本很高,通常不值得,但要确保新代码不加剧混乱。

还有一个容易忽略的地方是主从复制与时区。如果主库和从库的 time_zone 不一致,TIMESTAMP 列的复制不会出错,但基于时间条件的增量查询会漏数据或者重复数据。这类问题平时看不出来,只在切库或者补数据时爆出来。

六、第五步:应用层,PHP 与脚本的时间基准

PHP 的时区由 php.ini 里的 date.timezone 决定,默认是 UTC 并且新版会给出警告。很多人只改了一个 php.ini,却忘了 CLI 与 FPM 用的是两个不同的 ini 文件,结果网页时间是对的,命令行脚本跑出来是 UTC 的。

验证方法不要依赖代码里的 date() 输出,直接用 php -i 看 CLI 的生效配置,再用一个 phpinfo 页面看 FPM 的生效配置。两个都要对,缺一不可。修改后要 reload FPM,CLI 则是每次执行都重新读配置,不需要重启。

# CLI 与 FPM 分别看时区配置
php -i | grep -E 'date.timezone|Loaded Configuration'

# 命令行快速验证
php -r 'echo date("c"), PHP_EOL; echo date_default_timezone_get(), PHP_EOL;'

如果你的代码里散落着 date('Y-m-d') 这种不带时区参数的调用,那它用的是默认时区。想彻底解决,要么统一默认时区,要么在所有涉及存储的调用里显式带上 DateTimeZone。前者的改造成本低,后者的正确性更高。

顺便说一下 Unix 时间戳。time() 返回的是绝对时间,与时区无关,所以用时间戳存储的场景不会受这六步影响。如果你的数据表里存的是时间戳,那么所有时区问题都退化成展示层问题,修起来简单得多。这也是我个人更偏好存时间戳的原因之一。

七、第六步:定时任务的时间语义

cron 的时间判断依赖的是系统时区,不读 TZ 环境变量。所以系统时区一改,所有 crontab 的执行时间都会跟着平移。这就是开头那个事故的直接原因:换机器时系统时区从 +08 变成 UTC,原本凌晨三点的任务变成了北京时间十一点。

判断方法很简单,看 cron 服务是什么时候启动的。如果在改时区之前 cron 就已经在跑,某些发行版的 cron 会缓存时区,需要 restart 才生效。cronie 与 vixie-cron 的行为不同,最稳的做法是改完时区后重启一次 cron 服务。

# 改时区后重启 cron,确保它重新读取
systemctl restart cron

# 用一条测试任务验证生效时间
echo "0 3 * * * date >> /tmp/cron_probe.log" | crontab -

除了 cron,systemd timer 也是常见的时间调度器。它的时间语义和 cron 有两点不同:一是支持 OnCalendar 的时区后缀(比如 Asia/Shanghai),二是支持 Persistent 选项,关机期间错过的任务会在开机后补跑。这两点在换服务器或者夜间重启的运维里非常有用,但也容易造成「任务跑了两遍」的意外。

如果站点同时有 cron 和 systemd timer,务必在两个地方都标注清楚时区。最糟糕的情况是 cron 按系统时区跑、timer 按硬编码时区跑,两套任务在改时区后互相错开,形成难以解释的重复执行或者漏执行。

八、自检清单:六个问句

把上面六步压缩成六个问题,任何一台机器都能在五分钟内过一遍:系统时钟同步了吗、RTC 存的 UTC 还是本地时间、系统时区是不是 Asia/Shanghai、运行中的服务是不是在改时区之后重启过、数据库三层时区是不是一致、cron 是不是重启过。

六个问题里有任何一个答不上来,就说明这台机器的时区假设不完整。建议把答案写进运维台账,因为下一次换机器、加机器、或者排查跨时区问题时,这张表就是最有价值的依据。

最后一点经验:所有涉及时间的存储,优先存 UTC 时间戳,只在展示层做本地化。这样即使服务器时区被改错了,历史数据仍然是对的,只需要修正展示逻辑。反过来,如果历史数据里存的是本地时间字符串,那边一旦时区走偏,回头订正几乎不可能,只能靠日志里的请求时间逐条反推。

时间问题的可怕之处在于它不报错。所以更值得投入的不是修复,而是预防:把它写进新机器初始化脚本的检查项,比事后排查省几十倍的时间。

Last modification:November 18th, 2026 at 12:25 pm

Leave a Comment