08、es 进一步了解

最新推荐文章于 2020-02-16 20:41:27 发布
最新推荐文章于 2020-02-16 20:41:27 发布
阅读量135 收藏
点赞数
分类专栏： es 文章标签： es
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ITresource/article/details/103064440
版权

参考：

https://mp.weixin.qq.com/s/PIl9_1ogyKVDd0nxz8PhUw
全文搜索引擎选ElasticSearch还是Solr？
搞定Java垃圾回收，就这一篇！
Elasticsearch如何做到亿级数据查询毫秒级返回？
1、背景：Lucene
2、ES 核心概念
1）集群（Cluster）
2）分片（Shards）
3）副本（Replicas）
4）映射（Mapping）
3、ES 机制原理
1）写索引原理
2）存储原理
4、性能优化
1）存储设备
2）内部索引优化
3）调整配置参数
4）JVM 调优

春光静好
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
08、es 进一步了解___d_机制原理_存储原理
01-07
具体的存储路径可在配置文件 …/config/elasticsearch.yml 中进行设置，默认存储在安装目录的 Data 文件夹下。 建议不要使用默认值，因为若 ES 进行了升级，则有可能导致数据全部丢失： path.data: /path/to/data //...
elasticsearch6.6.0 aarch64 arm
最新发布
01-20
6. **更友好的API**：Elasticsearch 6.x系列对RESTful API进行了大量优化，使得开发者更容易与Elasticsearch进行交互，6.6.0版本可能在此基础上进行了进一步的完善。 7. **更好的兼容性**：与其他生态工具（如...
elasticsearch elasticsearch-6.2.2 elasticsearch-6.2.2.zip 下载
04-23
根据提供的文件信息，我们可以推断出本篇文章将围绕Elasticsearch 6.2.2版本进行详细介绍，包括其下载方式、主要功能特性以及在实际应用中的常见用途。 ### Elasticsearch简介 Elasticsearch是一款基于Lucene的...
elasticsearch-6.7.0 linux 版本
04-25
Elasticsearch（简称ES）是一款开源的、基于Lucene的搜索引擎，它以分布式、RESTful API、实时、可扩展性以及高可用性而广受欢迎。6.7.0是其历史版本之一，针对阿里云进行了优化，更适合在Linux环境中部署和运行。 ...
elasticsearch-demo.zip
07-21
在现代大数据处理和搜索领域，Elasticsearch（ES）因其高效、可扩展的特性，已经成为广泛使用的搜索引擎和数据分析工具。而SpringBoot作为Java开发者的首选微服务框架，它简洁的配置方式和强大的自动化配置能力，...
ES安装启动常见问题
炫炫的博客
10-12 1198
错误信息： 1]: max file descriptors [65535] for elasticsearch process is too low, increase to at least [65536] 查看大小的设置： 命令[root@host-172-16-xx-xx etc]# ulimit -Hn 65535 或 [root@host-172-16-32-38 etc]...
10、es 常见问题
炫炫的博客
02-16 1166
1、Caused by: org.elasticsearch.transport.RemoteTransportException: [node-1][172.20.44.8:9300][indices:data/read/search[phase/query]] Caused by: java.lang.IllegalArgumentException: Fielddata is disable...
08、es 进一步了解___b_ES 核心概念__3)副本（Replicas）
炫炫的博客
11-14 624
副本就是对分片的 Copy，每个主分片都有一个或多个副本分片，当主分片异常时，副本可以提供数据的查询等操作。 主分片和对应的副本分片是不会在同一个节点上的，所以副本分片数的最大值是 N-1（其中 N 为节点数）。 对文档的新建、索引和删除请求都是写操作，必须在主分片上面完成之后才能被复制到相关的副本分片。 ES 为了提高写入的能力这个过程是并发写的，同时为了解决并发写的过程中数据冲突的问题，ES ...
08、es 进一步了解___e_性能优化_
炫炫的博客
02-16 572
2)_内部索引优化 Elasticsearch 为了能快速找到某个 Term，先将所有的 Term 排个序，然后根据二分法查找 Term，时间复杂度为 logN，就像通过字典查找一样，这就是 Term Dictionary。 现在再看起来，似乎和传统数据库通过 B-Tree 的方式类似。但是如果 Term 太多，Term Dictionary 也会很大，放内存不现实，于是有了 Term Inde...
08、es 进一步了解___b_ES 核心概念__1)集群（Cluster）
炫炫的博客
11-14 523
ES 的集群搭建不需要依赖第三方协调管理组件，自身内部就实现了集群的管理功能。 ES 集群由一个或多个 Elasticsearch 节点组成，每个节点配置相同的 cluster.name 即可加入集群，默认值为 “elasticsearch”。 确保不同的环境中使用不同的集群名称，否则最终会导致节点加入错误的集群。 一个 Elasticsearch 服务启动实例就是一个节点（Node）。节点通过 ...
08、es 进一步了解___d_机制原理_写索引原理
炫炫的博客
02-16 333
下图描述了 3 个节点的集群，共拥有 12 个分片，其中有 4 个主分片（S0、S1、S2、S3）和 8 个副本分片（R0、R1、R2、R3），每个主分片对应两个副本分片，节点 1 是主节点（Master 节点）负责整个集群的状态。 写索引是只能写在主分片上，然后同步到副本分片。这里有四个主分片，一条数据 ES 是根据什么规则写到特定分片上的呢？ 这条索引数据为什么被写到 S0 上而不写到 S...
08、es 进一步了解___c_ES 的基本使用
炫炫的博客
11-14 329
在决定使用 Elasticsearch 的时候首先要考虑的是版本问题，Elasticsearch （排除 0.x 和 1.x）目前有如下常用的稳定的主版本：2.x，5.x，6.x，7.x（current）。 你可能会发现没有 3.x 和 4.x，ES 从 2.4.6 直接跳到了 5.0.0。其实是为了 ELK（ElasticSearch，Logstash，Kibana）技术栈的版本统一，免的给用户...
06、es 重新授权
炫炫的博客
11-14 329
curl -H "Content-Type: application/json" -XPUT "http://localhost:9200/_license?acknowledge=true" -d @/Users/lxy/Downloads/license.json {"acknowledged":true,"license_status":"valid"}% ...
08、es 进一步了解___b_ES 核心概念__4)映射（Mapping）
炫炫的博客
11-14 319
映射是用于定义 ES 对索引中字段的存储类型、分词方式和是否存储等信息，就像数据库中的 Schema ，描述了文档可能具有的字段或属性、每个字段的数据类型。 只不过关系型数据库建表时必须指定字段类型，而 ES 对于字段类型可以不指定然后动态对字段类型猜测，也可以在创建索引时具体指定字段的类型。 对字段类型根据数据格式自动识别的映射称之为动态映射（Dynamic Mapping），我们创建索引时具体...
08、es 进一步了解___b_ES 核心概念
炫炫的博客
11-14 287
ES 是使用 Java 编写的一种开源搜索引擎，它在内部使用 Lucene 做索引与搜索，通过对 Lucene 的封装，隐藏了 Lucene 的复杂性，取而代之的提供一套简单一致的 RESTful API。 然而，Elasticsearch 不仅仅是 Lucene，并且也不仅仅只是一个全文搜索引擎。 它可以被下面这样准确的形容： 一个分布式的实时文档存储，每个字段可以被索引与搜索。 一个分布式实时...
08、es 进一步了解___b_ES 核心概念__2)分片（Shards）
炫炫的博客
11-14 283
ES 支持 PB 级全文搜索，当索引上的数据量太大的时候，ES 通过水平拆分的方式将一个索引上的数据拆分出来分配到不同的数据块上，拆分出来的数据库块称之为一个分片。 这类似于 MySQL 的分库分表，只不过 MySQL 分库分表需要借助第三方组件而 ES 内部自身实现了此功能。 在一个多分片的索引中写入数据时，通过路由来确定具体写入哪一个分片中，所以在创建索引的时候需要指定分片的数量，并且分片的数...
09、es 相关插件安装
炫炫的博客
02-16 247
1、kibana 下载安装 1、下载 wget https://artifacts.elastic.co/downloads/kibana/kibana-6.2.4-linux-x86_64.tar.gz 2、解压 tar -zxvf kibana-6.2.4-linux-x86_64.tar.gz 3、启动及检测 ps -ef|grep kibana ps -ef|grep 5601 ...
03、es启动问题
炫炫的博客
11-14 226
1、启动用户为非root 用户 2、 ERROR: [2] bootstrap checks failed [1]: max file descriptors [65535] for elasticsearch process is too low, increase to at least [65536] [2]: max virtual memory areas vm.max_map_co...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值