在编程世界里,从 UTC 日期时间字符串获取 Unix 时间戳,看似简单,实则暗藏玄机。你以为输入一个像 “Fri, 17 Jan 2025 06:07:07” 这样的 UTC 时间,然后轻松得到 1737094027(从 1970 年 1 月 1 日 00:00:00 UTC 开始经过的秒数)就万事大吉了?事实可没这么简单,这背后涉及到一系列复杂的时间处理问题,还会让你发现 POSIX 时间处理函数在不同 C 库及相关语言中的各种 “意外特性”。今天,咱们就来深入探讨一下这个让人又爱又恨的话题。
一、时间处理的复杂性
时间本身就是一个复杂的概念,要是再把闰秒和相对论这些因素考虑进去,那就更让人头疼了。而人类对时间的记录方式,从模糊不清到精确无比,各不相同。就拿阿姆斯特丹的时间来说,由于夏令时的存在,“2025 年 3 月 30 日 02:20” 这个时间点在当地是不存在的,时间会直接从 01:59:59 跳到 03:00:00。但 “2024 年 10 月 27 日 02:30” 就更让人困惑了,因为夏令时结束时,02:59:59 的下一秒又回到了 02:00:00,这就导致有两个 “02:00” 的时间点。从下面的命令行示例就能看出工具在处理这种情况时的随意性:
$ TZ=Europe/Amsterdam date -d '20241027 01:59:59' +"%Y-%m-%d %H:%M:%S %s %z"
2024-10-27 01:59:59 1729987199 +0200
$ TZ=Europe/Amsterdam date -d '20241027 02:00:00' +"%Y-%m-%d %H:%M:%S %s %z"
2024-10-27 02:00:00 1729990800 +0100
你看,当要求解释 02:00:00 这个时间时,GNU date 工具选择了第二个出现的时间点。而且据我观察,这还和执行命令的时间有关,如果在四月执行,可能就会选择第一个 02:00:00 实例,是不是很让人摸不着头脑?
二、POSIX 时间概念与 struct tm
在 POSIX/Unix 系统中,指定时间的有效方式是用相对于某个 “纪元”(epoch)的秒数。POSIX/Unix 的纪元是 1970 年 1 月 1 日 00:00:00 UTC,GPS 的纪元是 1980 年 1 月 6 日 00:00:00 UTC,伽利略(欧盟的 GPS 系统)的纪元是 1999 年 8 月 21 日 23:59:47 UTC,北斗系统的纪元是 2006 年 1 月 1 日 00:00:00 UTC。其中,GPS、伽利略和北斗系统都明智地忽略了闰秒,把这些麻烦事留给人类去处理。而我们常用的 POSIX/Unix 的 “time_t” 时间戳,除了在闰秒期间可能会有歧义(不过闰秒以后可能也不会再有了),其他时候还是很可靠的。
为了在时间戳和人类可读的时间格式之间进行转换,UNIX 提供了 struct tm
结构体,它包含了年、月、日、时、分、秒等时间信息:
struct tm {
int tm_sec; /* 秒 [0, 60] */
int tm_min; /* 分 [0, 59] */
int tm_hour; /* 时 [0, 23] */
int tm_mday; /* 一个月中的第几天 [1, 31] */
int tm_mon; /* 月份 [0, 11] (一月是 0) */
int tm_year; /* 年份减去 1900 */
int tm_wday; /* 一周中的第几天 [0, 6] (周日是 0) */
int tm_yday; /* 一年中的第几天 [0, 365] (1 月 1 日是 0) */
int tm_isdst; /* 夏令时标志 */
long tm_gmtoff; /* 相对于 UTC 的秒数 */
const char *tm_zone; /* 时区缩写 */
};
不过,这个结构体的设计其实有点冗余,像一周中的第几天和一年中的第几天,通过其他字段就能推算出来。而且,tm_gmtoff
、tm_zone
和 tm_isdst
这几个字段的含义不仅定义得不太清晰,理解起来也有难度,并且它们的作用还会根据结构体的使用方式而变化。
struct tm
的一个重要作用是作为 mktime()
函数的输入,mktime()
会把 “根据本地时区拆分的时间” 转换为 Unix 时间戳。但它的功能可不止这一个,它还会对传入的 struct tm
进行标准化处理。比如说,如果你想把当前时间往后调一周,你可能会直接给 time_t
时间戳加上 604800 秒(一周的秒数),但如果这个调整跨越了夏令时的边界,你原本下午 2 点的约会可能就会变成下周下午 1 点或 3 点,这可不是我们想要的结果。而 mktime()
就能帮你处理这种情况,即使你传入像 “3 月 35 日” 这样不合理的日期,它也能帮你修正。不过,使用 mktime()
时也有一些需要注意的地方,下面我们就来详细说说。
三、mktime()
的使用与注意事项
先来看个例子:
struct tm tm = {.tm_hour=14, .tm_mday = 28,
.tm_mon = 2, .tm_year = 2025 - 1900,
.tm_isdst = -1}; // <- 注意这里的 -1
time_t t = mktime(&tm);
cout << "original: "<< ctime(&t);
tm.tm_mday += 7;
t = mktime(&tm);
cout << "mktime adjusted: "<< ctime(&t);
在欧洲 / 阿姆斯特丹时区,这段代码的输出结果是:
original: Fri Mar 28 14:00:00 2025
mktime adjusted: Fri Apr 4 15:00:00 2025
为什么我们的约会时间会偏移一个小时呢?问题就出在 tm.tm_isdst
这个字段上。mktime()
要求你明确指定时间是否处于夏令时,或者让它自己去判断(我们一开始把 tm.tm_isdst
设置为 -1 就是让它自己判断)。当我们第一次调用 mktime()
时,它发现初始时间不在夏令时,就把 tm_isdst
设置为 0。第二次调用时,这个设置没有改变,但新的时间其实是处于夏令时的,所以就出现了时间偏移的情况。解决办法就是在第二次调用 mktime()
之前,把 tm_isdst
重新设置为 -1。
另外,使用 mktime()
处理 UTC 时间时也有个大坑。mktime()
会把传入的时间当作 “本地时间” 来处理,所以如果你要处理 UTC 时间,就需要在调用 mktime()
之前把时区设置为 UTC。但如果你的程序有其他线程在运行,修改整个应用程序的时区可能会产生副作用。不过,多线程程序本来就不能随意更改环境变量,所以这个方法也行不通。
还好,有一个非标准但广泛可用的函数 timegm()
能很好地解决 UTC 时间的处理问题。从 IEEE Std 1003.1 - 2024 标准中可知,“未来的标准版本预计会添加一个 timegm()
函数,它与 mktime()
类似,但 timeptr
指向的 tm
结构体包含的是协调世界时(UTC)的拆分时间”。在 Windows 系统上,timegm()
对应的函数是 mkgmtime()
。如果你的系统是 AIX,没有 timegm()
函数,也可以在特定的地方找到独立的实现。
总结一下使用 mktime()
和 timegm()
(或 mkgmtime()
)的要点:
-
使用
mktime()
处理本地时间时,把tm_isdst
设置为 -1,这通常符合人们的预期,但在夏令时切换时,可能会随机得到两个 “02:30”(或类似时间点)中的一个。 -
在填充
struct tm
之前,最好先把其他字段清零,以防万一。 -
要知道
mktime()
会修改传入的struct tm
,可能会产生副作用,所以在重复使用struct tm
之前,至少要重置tm_isdst
。 -
不管你怎么设置
tm_gmtoffset
或tm_zone
,mktime()
都会使用当前时区。如果你想让它把struct tm
当作 UTC 时间处理,就需要设置 TZ 环境变量为 UTC,但这会影响其他做时间操作的线程。所以,能使用timegm()
或mkgmtime()
就尽量用它们。
四、解析 UTC 时间字符串
我们都希望能把像 “Fri, 17 Jan 2025 06:07:07 GMT” 这样的时间字符串直接传入 strptime()
函数,然后得到一个合理的 struct tm
结构体。但 Linux glibc 的 strptime()
手册中关于 %z
和 %Z
这两个时区格式说明符的描述含糊不清,让人摸不着头脑。很多人可能会期望用 strptime()
结合 %Z
(用于解析 “GMT”),再配合 mktime()
就能把 UTC 时间字符串转换为 Unix 时间戳,但实际上 mktime()
根本不会看 tm_gmtoffset
和 tm_zone
这两个字段,所以即使 strptime()
做对了,也无法实现我们的目标,而且它还真就做不对。
截至 2024 年,虽然 Open Group 对 strptime()
有了更详细的规范,但里面也都是些让人无奈的消息。strptime()
对 %z
没有明确的行为定义,这个原本应该用来处理 “+0200” 这种偏移标识符的符号,现在根本靠不住。对于 %Z
,虽然有一些说明,但作用也非常有限。只有在特定的本地化设置下,它才可能设置 tm_isdst
的正确值,而且像 “EST” 这样的字符串,由于没有明确的定义,也很难通过 %Z
来解析。
不过,既然我们知道了 timegm()
这个好帮手,就可以忽略 %z
和 %Z
了。
五、strptime()
与本地化问题
在很多情况下,我们需要解析包含英文日期和月份名称的时间字符串,并且希望 strptime()
能正确处理。但 IEEE/Open Group 标准规定,strptime()
的转换操作是由当前本地化设置的 LC_TIME 类别决定的。这里有个容易忽略的点,C 和 C++ 程序默认使用的是 “C” 本地化,这实际上就是美式英语。这对于解析数据中的时间字符串来说通常是好事,因为这些字符串大多是英文的。
但如果你的程序调用了 setlocale()
函数,设置了非 “C” 的本地化,那你的程序可能就只能处理特定语言(比如荷兰语)的时间字符串了,这可就麻烦了。你可能会想在调用 strptime()
之前把本地化设置为 “C”,用完再改回来,但 setlocale()
在多线程程序中调用并不安全(除了在线程启动之前),而且即使安全调用,也可能会影响其他线程的输出。
所以,一般来说,如果你需要解析特定的时间字符串并且想用 strptime()
,一定要确保程序处于你期望的本地化环境中。虽然有 strftime_l()
函数可以指定格式化时间时使用的本地化,但并没有官方可用的 strptime_l()
函数。
当然,你也可以自己解析像 “17 Jan 2025 06:07:07” 这样的字符串,填充 struct tm
结构体,然后让 mktime()
来计算 Unix 时间戳,这也是一种可行的办法。
六、用 C++ 解决本地化问题及 C++20 的强大时间处理功能
C++ 的输入输出流(iostreams)在处理本地化方面比 C/POSIX 做得更好。在 C++ 中,你可以为每个输入输出流设置本地化。下面是一个 C++ 辅助函数,如果你在设置了本地化的 C 程序中需要解析任意 UTC 时间字符串,可以调用这个函数:
extern "C"
int utcstr2epoch(const char* timestr, const char* fmtstr, struct tm* output)
{
std::tm t = {}; // tm_isdst = 0, 不用考虑夏令时,这是 UTC 时间
std::istringstream ss(timestr);
ss.imbue(std::locale()); // "LANG=C", 但本地化设置是本地的
ss >> std::get_time(&t, fmtstr);
if (ss.fail())
return -1;
// 修正星期几、一年中的第几天等字段
t.tm_isdst = 0; // 不用考虑夏令时
t.tm_wday = -1;
if(mktime(&t) == -1 && t.tm_wday == -1) // "真正的错误"
return -1;
*output = t;
return 0;
}
这个函数还展示了如何处理 mktime()
的错误。当 mktime()
处理 1969 年 12 月 31 日 23:59 这样的时间时,会返回 -1 作为错误代码。我们可以用 tm_wday
作为标志来判断是否有数据被处理,以此确定是否发生了错误。
另外,还有一个基于 C 的小示例程序,它可以解析英文的 UTC 时间戳,并使用调用环境的本地化设置来打印时间:
$ LC_TIME="nl_NL.utf-8" ./utcparse "1 Jan 1970 00:00:00" "%d %b %Y %H:%M:%S"
UTC Time: donderdag, 1 januari 1970 00:00:00, day of year 001
time_t: 0
到了 C++20 及更高版本,更是引入了强大的时区数据库。虽然这个功能还没有在所有编译器上都可用,但预标准化版本可以单独使用。比如下面这个超酷的例子:
auto meet_nyc = make_zoned("America/New_York",
date::local_days{Monday[1]/May/2016} + 9h);
auto meet_lon = make_zoned("Europe/London", meet_nyc);
auto meet_syd = make_zoned("Australia/Sydney", meet_nyc);
cout << "The New York meeting is " << meet_nyc << '\n';
cout << "The London meeting is " << meet_lon << '\n';
cout << "The Sydney meeting is " << meet_syd << '\n';
这段代码选择了 “2016 年 5 月的第一个星期一,纽约当地时间上午 9 点”,然后轻松地将其转换为另外两个时区的时间:
The New York meeting is 2016-05-02 09:00:00 EDT
The London meeting is 2016-05-02 14:00:00 BST
The Sydney meeting is 2016-05-02 23:00:00 AEST
更厉害的是,这个时区库不仅可以使用操作系统的时区数据库(可能缺少关键的闰秒细节),还能直接从 IANA tzdb 获取数据。这意味着你可以精确计算 1978 年一次航班飞行的实际时长,即使这次飞行跨越了夏令时变化和闰秒,也不在话下。
在 C 和 C++ 中从 UTC 日期时间字符串获取 Unix 时间戳确实充满挑战,但只要掌握了正确的方法,也能轻松应对。希望今天的分享能让你在处理时间相关的编程问题时更加得心应手。
科技脉搏,每日跳动。
与敖行客 Allthinker一起,创造属于开发者的多彩世界。
- 智慧链接 思想协作 -