es 分片迁移_ES数据实测

本文作者郭彦超探讨了ES的分片迁移,通过Spark脚本导入数据进行性能评测。测试显示,单索引单分片和多分片在访问量较小的情况下能实现秒级响应,而访问量增大则响应时间增加。按日构建单索引单分片并在基础上进行segment合并,查询性能提升至100ms以内。
摘要由CSDN通过智能技术生成

2d8b6bbfe5f79551ec5eccfdac24fbe9.png

文章:郭彦超(北京中心—技术专家)

排版:陈倩

接上一篇 ES集群优化之海量时序数据处理 留下的疑问,我们对ES进行性能评测

1

数据导入 按上文约定配置,我们先将HDFS上一个月的日志数据迁移至ES打通数据同步的流程 1、创建index
PUT visitor_20190701{
            "mappings" : {
          "_source" : {
            "excludes" : [ ]      },      "dynamic_templates" : [        {
              "strings" : {
                "match_mapping_type" : "string",            "mapping" : {
                  "doc_values" : false,              "norms" : false,              "type" : "keyword"            }     
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值