微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

使用 Spark SQL 将字符串格式化为日期时间

如何解决使用 Spark SQL 将字符串格式化为日期时间

我正在尝试使用 spark sql 从看起来像这样的东西转换和重新格式化存储为字符串的日期列...

30/03/20 02:00

作为日期时间列的东西,看起来像这样......

2020-03-30 02:00 ('YYYY-MM-dd HH:mm')

我不是在使用 python,而是直接在 DBeaver 中将 sql 写入 Spark 数据湖。非常感谢任何帮助。

解决方法

使用 to_timestamp 将字符串日期解析为时间戳列并使用 date_format 将其格式化为所需的模式:

select date_format(to_timestamp(sting_date,'dd/MM/yy HH:mm'),'yyyy-MM-dd HH:mm') as date 

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。