当前位置: 首页 > news >正文

【Flink SQL实战】 UTC 时区格式的 ISO 时间转东八区时间

文章目录

    • 一、原始数据格式
    • 二、解决方案
    • 三、其他要求

在实际开发中,我们常常会遇到此类情况:数据源里的时间格式是类似 2025-04-21T09:23:16.025Z 这种带 TimeZone 标识的 ISO 8601 格式,而我们需要在 Flink SQL 中将其转换成北京时间显示。

然而,基于 Flink 1.16.1 版本的限制,新版本支持的 AT TIME ZONEFROM_UTC_TIMESTAMP 函数都无法使用,但我们仍可以通过原始时间序列分解合成 + TO_TIMESTAMP_LTZ 的方式来完成。

 

一、原始数据格式

如下列数据表格,其中 creat_time 为一条 UTC 时区格式的 ISO 时间字符串:

2025-04-21T09:23:16.025Z需要转成北京时间:2025-04-21 17:23:16

将 UTC +0 转成为 Asia/Shanghai 时区 (+8)

 

二、解决方案

我们通过 Flink SQL 里带格式分解来处理:

-- 源数据
CREATE TEMPORARY VIEW source_table AS
SELECT * FROM (VALUES('2025-04-21T09:23:16.025Z'),('2025-04-21T09:24:25.339Z')
) AS t(creat_time);-- 转北京时间
CREATE TEMPORARY VIEW view1 AS SELECTcreat_time,TO_TIMESTAMP_LTZ(UNIX_TIMESTAMP(SUBSTRING(creat_time, 1, 19), 'yyyy-MM-dd''T''HH:mm:ss') * 1000+ CAST(SUBSTRING(creat_time, 21, 3) AS INT),3) AS local_time
FROM source_table;-- 转string
CREATE TEMPORARY VIEW view2 AS  SELECTcreat_time,DATE_FORMAT(TO_TIMESTAMP_LTZ(UNIX_TIMESTAMP(SUBSTRING(creat_time, 1, 19), 'yyyy-MM-dd''T''HH:mm:ss') * 1000+ CAST(SUBSTRING(creat_time, 21, 3) AS INT),3),'yyyy-MM-dd HH:mm:ss.SSS') AS local_time_str
FROM source_table;DESCRIBE view2;
  • SUBSTRING(creat_time, 1, 19) 提取 yyyy-MM-ddTHH:mm:ss
  • UNIX_TIMESTAMP(..., format) 转成秒级时戳
  • SUBSTRING(creat_time, 21, 3) 提取毫秒
  • TO_TIMESTAMP_LTZ(..., 3) 转为展示时区为北京时间的 timestamp

 

三、其他要求

确保 Flink SQL 环境里设置了下列配置:

SET table.local-time-zone = 'Asia/Shanghai';

这样 TO_TIMESTAMP_LTZ 输出才会是北京时间,而不是 UTC。

 

http://www.xdnf.cn/news/62749.html

相关文章:

  • 2025.04.20【Lollipop】| Lollipop图绘制命令简介
  • python——函数
  • Unocss 类名基操, tailwindcss 类名
  • 分数线降低,25西电马克思主义学院(考研录取情况)
  • RESTful学习笔记(一)
  • 国产仪器进化论:“鲁般号”基于无人机的天线测试系统
  • 微软Entra新安全功能引发大规模账户锁定事件
  • 【Vue】组件基础
  • Linux系统下docker 安装 redis
  • Mybatis延迟加载、懒加载、二级缓存
  • 统计图表ECharts
  • 2025年世界职业院校技能大赛实施方案(意见稿)
  • 【单片机 C语言】单片机学习过程中常见C库函数(学习笔记)
  • 由Ai生成的Linux 入门到精通学习路径
  • 记录seatunnel排查重复数据的案例分析
  • ESP8266_ESP32 Smartconfig一键配网功能
  • qt 配置 mysql 驱动问题:Cannot load library qsqlmysql;QMYSQL driver not loaded
  • 如何编写单元测试
  • 运维工程师面试总结21/4
  • 前端笔记-Axios
  • 3步拆解Linux内核源码的思维模型
  • 汽车动力转向器落锤冲击试验台
  • Java+nanomsg快速实现去broker的数据通信
  • 2025年最新服务器、中间件安全(面试题)
  • HADOOP 3.4.1安装和搭建(尚硅谷版~)
  • 强化学习系统学习路径与实践方法
  • 随机面试--<二>
  • 1+X: Python程序开发职业技能等级要求(初级)练习资料分享
  • 哈希表的学习
  • 基于RK3588+FPGA+AI YOLO的无人船目标检测系统(一)概述