Elasticsearch 时区问题

最新推荐文章于 2023-12-07 10:07:17 发布
最新推荐文章于 2023-12-07 10:07:17 发布
阅读量3k 收藏
点赞数
分类专栏： java 文章标签： java 后端
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_67402970/article/details/123892274
版权

背景：业务正常通过应用程序写入没有问题，通过hive同步mysql到es库的时候会出现时区问题，mysql时间字段类型是datetime；

原因：ES默认存储的是UTC时间，比北京时间晚8h；

解决方案：
1、将时间写入ES中string类型字段；
2、将时间以时间戳的形式存入ES中long类型字段；
3、ES默认是UTC时间，将时间+8h后存入ES中date类型字段；
4、写入时间数据时，指定时区，eg：“time”: “2016-07-15T12:58:17.136+0800” //东八区时间

m0_67402970
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
timezones-api:由Datasette提供支持的API，用于查找纬度经度点的时区
05-03
时区API 由API，用于查找纬度/经度点的时区 在此处尝试API： ： 完整的背景和说明： 使用来自shapefile
Elasticsearch Date类型数据默认格式：将数据写入es的时间后再读取出来缺少8小时原因
热门推荐
AI_girls的博客
06-26 3万+
一、问题描述把想要的数据通过同步工具从MySQL中写入es中存储，然后从搜索后台管理系统读取数据列表，发现时间显示比数据库中显示的时间要提前8小时。二、问题分析首先在索引里面查看了时间数据的存储格式为世界时间，默认是0时区，但是我们一般用的是北京时间东八区，因此间隔了八小时。直接转过来的时间是：但实际上数据库里面存储的时间是：我们需要最终显示的是时间是和存在数据库中的北京时间一致。搜索的数据来源于...
i18n-timezones:Rails I18n时区翻译
05-08
I18nTimezones I18n时区-此gem的目的是简单地提供时区转换。 该gem易于与需要i18​​n时区转换的其他gem结合使用，因此我们可以使用通用的i18n时区转换gem。 如果您要对时区和翻译做任何事情，则无需重新发明轮子并添加自己的翻译。 只需使用此gem的时区转换，就不必为每个语言环境添加和管理每个时区转换。 支持的语言环境 以下所有语言环境都有翻译：ar，de，en，es，fr，he，it，ja，ko，nl，pt，pt-BR，ru，zh-CN，zh-TW。 安装 添加到您的Gemfile中： gem 'i18n-timezones' 用法 时区将自动转换为当前语言环境。 甚至：default都将转换为当前语言环境。 time_zone_select :user , :time_zone , ActiveSupport :: TimeZone . us_
Java时区转换实例代码解析
08-24
主要介绍了Java时区转换实例代码解析,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
ElasticTimezone:将每个时区转储到Elasticsearch服务器中以进行超快速查询
05-17
这是什么 将每个时区转储到Elasticsearch服务器中以进行超快速查询 如何 node index.js --host=myhost --index=myindex 参数 主机（localhost：9200）; 指数（geo-zones-test）； 类型（TimeZone）; 极限（5）;
数据存入es 时间差了8个小时
weixin_62812758的博客
12-19 3399
从上面可以看出来中国的时间是等于UTC时间+8小时，es默认存储时间的格式是UTC时间，如果我们查询es然后获取时间日期默认的数据，会发现跟当前的时间差8个小时，对于es来说这其实是正常的。其中GMT时间可以近似认为和UTC时间是相等的，但从精度上来说UTC时间更精确。这种现象其实是正常的，因为es默认存储时间的格式是UTC时间，我们一般用的是UTC+8。3、ES默认是UTC时间，将时间+8h后存入ES中date类型字段；2、将时间以时间戳的形式存入ES中long类型字段；（2）UTC:世界协调时间。
ElasticSearch Date时区问题
https://gitee.com/micai-code
03-18 523
ElasticSearch Date时区问题
es 模板
weixin_33912246的博客
06-13 415
{ "template": "log*", "order":10, "settings": { "index":{ "refresh_interval" :"30s", "number_of_shards": "6&
Elasticsearch时区问题
大白能的博客
07-15 1万+
发现问题 创建索引,配置date类型字段 批量插入数据,格式分别为带时区信息,不带时区信息,时间戳 对数据进行聚合 对数据进行查询,分别使用带时区信息,不带时区信息,时间戳三种格式 创建索引,配置字段类型 PUT testdate { "mappings": { "testdate":{ "properties": { "tag":{ ...
bitesofpy:PyBites与codechalleng.es
05-22
咬人 在这里，我将使用PyBites构建我的Pythonic投资组合代码！ 学习途径 演算法 ， ， ， ， ， 生物信息学 ， 馆藏 ， ， ， ， ， ， 97 ， 108 ， 156 ， 180 数据分析4 ， 18 ， 27 ， 30 ， 48 ， 90 ， 124 ， 129 ， 130 ， 145 ， 170 ， 178 ， 183 ， 184 ， 188 ， 195 ， 202 ， 281 资料格式13 ， 27 ， 30 ， 38 ， 79 ， 90 ， 111 ， 124 ， 129 ， 130 ， 150 ， 160 ， 184 ， 190 ， 195 ， 202 日期时间和时区7 ， 16 ， 19 ， 28 ， 39 ， 51 ， 67 ， 73 ， 92 ， 128 ， 139 ， 141 ， 144 ， 147 ， 151 ， 173
Elasticsearch 滞后8个小时等时区问题，一网打尽！
qq_34905631的博客
04-21 1388
我们看一下东8区百度百科定义：东八区（UTC/GMT+08:00）是比世界协调时间（UTC）/格林尼治时间（GMT）快8小时的时区，理论上的位置是位于东经112.5度至127.5度之间，是东盟标准的其中一个候选时区。是：各个处理端时区不一致，写入源的时区、Kibana默认是本地时区（如中国为：东8区时区），而 logstash、Elasticsearch 是UTC时区。ingest 预处理时区的好处：方便、灵活的实现了写入数据的时区转换。那么问题就转嫁为：写入的时候转换成给定时区（如：东8区）就可以了。
Elasticsearch中的date与时区问题
不见其长，日有所长
06-23 1万+
1 前言 本文主要讲解Elasticsearch中date类型数据的底层存储原理，以及对带时区日期字符串和不带时区的日期字符串如何在ES底层存储进行验证。对于直接存储Long类型时间戳，不作过多描述。 1.1 Date类型数据的存储 UTC(Universal Time Coordinated) 叫做世界统一时间，中国大陆所用的时间是东8区时间，比UTC时间超前8小时。即与 UTC 的时差是 +8 ,也就是 UTC+8。 在Elasticsearch内部，不论 date 是什么展示格式，所有date类型数据
es设置时区
u011250186的博客
07-29 3630
es设置时区
[ES]ElasticSearch中时间日期的时区探讨
最新发布
古辛博格
12-07 693
ES的默认时区为UTC，探讨通过强转或时间函数获得的结果影响
ES时间问题
u011197085的博客
07-11 253
这就是为什么你在MySQL中看到的是"2023-07-05"，但在Elasticsearch中看到的是"2023-07-04T16:00:00.000Z"。因为"2023-07-04T16:00:00.000Z"的UTC时间，转换到你的本地时间，就变成了"2023-07-05"。所以，Elasticsearch默认使用UTC时间。你看到的"2023-07-04T16:00:00.000Z"是UTC（协调世界时）时间格式，而你的MySQL数据库可能在保存日期和时间时使用的是你所在时区的本地时间。
Java Elasticsearch按时间聚合查询，时区有误，导致数据不准确
记录工作开发中遇到的技术难点，方便自己查看，也希望可以帮助到他人...
07-02 830
Java Elasticsearch按时间聚合查询，时区有误，导致数据不准确
五分钟带你玩转Elasticsearch（十四）企业实战——springboot与es时区相差8小时解决方案
小鲍侃java
01-20 1521
spring boot通过elk存储日志时时区会有问题：通过下文可以看出保存的@timestamp会少8个小时 楼主这里的处理办法：在保存时 新增一个timeFormat字段供查询显示使用 在通过时间筛选时 通过@timestamp字段筛选，输入的时间参数为当前时间，spring boot会自动减去8小时 ...
Elasticsearch-日期数据类型和时区详解
大白能的博客
12-11 9892
前言 本文基于elasticsearch7.3.0版本 elasticsearch日期数据类型 官方文档:日期数据类型 在elasticsearch内部，日期被转换为UTC(如果指定了时区)，并存储为一个自1997-01-01 00:00:00(GMT)至当前时刻所经过的毫秒数 对日期的查询在内部转换为这种毫秒数表示形式上的范围查询 聚合和存储字段的结果将根据与字段关联的日期格式转换回字符串(聚合...
Elasticsearch中的时区设置
03-28
Elasticsearch中的时区设置可以通过在配置文件中设置`timezone`参数来实现。具体操作如下： 1. 打开Elasticsearch配置文件`elasticsearch.yml`。 2. 在文件末尾添加以下内容： ``` # 设置时区 # timezone格式为"区域/城市"，例如"Asia/Shanghai" # 更多时区列表可以参考https://www.elastic.co/guide/en/elasticsearch/reference/current/time-zone-list.html cluster: timezone: "Asia/Shanghai" ``` 3. 保存并退出配置文件。 4. 重启Elasticsearch服务，使配置生效。 设置完时区后，Elasticsearch会将所有的日期时间数据都转换为指定时区的时间。如果不设置时区，则默认使用UTC时间。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值