本文介绍了使用PySpark操作MongoDB时遇到的时区和时间过滤问题。MongoDB存储时间以UTC 0时区的ISO-8601格式，与北京时间相差8小时。在进行数据读取时，即使将本地时间转换为UTC，读出的数据仍会有8小时的偏差。此外，文章还探讨了解决时间过滤问题的方法。
MongoDB
MongoDB的基本操作
pyspark MongoDB 使用经验
1. 时区问题
MongoDB的日期格式是 ISO-8601格式的，是一种军事时区后缀（比如UTC的‘Z’后缀），示例如下：ISODate(“2018-08-23T10:05:09.000Z”)，主要原因是官方MongoDB.driver存储时间按照UTC 0时区存储，值得注意的一个是MongoDB存储的时间会比北京时间相差8小时。
拿读取MongoDB来说：
#读：
MongoDB：ISODate("2018-08-23T10:05:09.000Z") ---> pyspark客户端：2018-08-23 18:05:09
#写：
pyspark客户端now()：2018-10-31 11:15:59.337810 ---> ISODate
最低0.47元/天 解锁文章
347
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
