文章/答案/技术大牛

发布

社区首页 >问答首页 >如何转换秒从时代的时间到世界协调时的时间在火花？

问如何转换秒从时代的时间到世界协调时的时间在火花？
EN

Stack Overflow用户

提问于 2019-06-25 19:35:49

回答 1查看 303关注 0票数 0

假设我有一个列名为epoch的dataframe，它是从历次时间开始的几秒，我想将它转换为UTC时间。怎么用火花呢？

我不想对" GMT-7“进行编码，我想确保使用正确的偏移量，GMT-7或GMT-8是基于夏时制的。我在运行Spark2.1

myDF = myDF.withColumn("epoch_tmst",(myDF.epoch.cast(dataType=TimestampType()))
myDF = myDF.withColumn("epoch_tmst_utc",to_utc_timestamp(myDF.epoch_tmst,"GMT-7"))

python-2.7

apache-spark

pyspark

pyspark-sql

回答 1

Stack Overflow用户

发布于 2019-06-26 03:38:13

没有办法直接将unixtime转换为UTC时间戳。

(你可以用火花放电分别做unix->GMT-7和GMT-7->UTC，但看起来这不是你想要的)

不如把它们放到文字字符串中，然后使用Python的时间模块如何？https://docs.python.org/3/library/time.html#time.gmtime

票数 0

页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持

原文链接：

https://stackoverflow.com/questions/56760916

复制

相似问题

问如何转换秒从时代的时间到世界协调时的时间在火花？
EN

回答 1

Stack Overflow用户

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

问如何转换秒从时代的时间到世界协调时的时间在火花？EN

回答 1

Stack Overflow用户

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

问如何转换秒从时代的时间到世界协调时的时间在火花？
EN