ElasticSearch入门（一）

最新推荐文章于 2024-04-26 07:00:00 发布
最新推荐文章于 2024-04-26 07:00:00 发布
阅读量409 收藏
点赞数
分类专栏： Elasticsearch 文章标签： 搜索引擎
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43049310/article/details/114763845
版权

B站狂神说Java的ElasticSearch课程：https://www.bilibili.com/video/BV17a4y1x7zq

在学习ElasticSearch之前，先简单了解一下Lucene：

Doug Cutting开发

是apache软件基金会4 jakarta项目组的一个子项目
是一个开放源代码的全文检索引擎工具包
不是一个完整的全文检索引擎，而是一个全文检索引擎的架构，提供了完整的查询引擎和索引引擎，部分文本分析引擎（英文与德文两种西方语言）
当前以及最近几年最受欢迎的免费Java信息检索程序库。

Lucene和ElasticSearch的关系：

ElasticSearch是基于Lucene 做了一下封装和增强

一、ElasticSearch概述

官网：https://www.elastic.co/cn/downloads/elasticsearch

Elaticsearch，简称为es，es是一个开源的高扩展的分布式全文检索引擎，它可以近乎实时的存储、检索数据;本身扩展性很好，可以扩展到上百台服务器，处理PB级别(大数据时代）的数据。es也使用java开发并使用Lucene作为其核心来实现所有索引和搜索的功能，但是它的目的是通过简单的RESTful API来隐藏Lucene的复杂性，从而让全文搜索变得简单。

据国际权威的数据库产品评测机构DB Engines的统计，在2016年1月，ElasticSearch已超过Solr等，成为排名第一的搜索引擎类应用。
历史
多年前，一个叫做Shay Banon的刚结婚不久的失业开发者，由于妻子要去伦敦学习厨师，他便跟着也去了。在他找工作的过程中，为了给妻子构建一个食谱的搜索引擎，他开始构建一个早期版本的Lucene。

直接基于Lucene工作会比较困难，所以Shay开始抽象Lucene代码以便lava程序员可以在应用中添加搜索功能。他发布了他的第一个开源项目，叫做“Compass”。

后来Shay找到一份工作，这份工作处在高性能和内存数据网格的分布式环境中，因此高性能的、实时的、分布式的搜索引擎也是理所当然需要的。然后他决定重写Compass库使其成为一个独立的服务叫做Elasticsearch。

第一个公开版本出现在2010年2月，在那之后Elasticsearch已经成为Github上最受欢迎的项目之一，代码贡献者超过300人。一家主营Elasticsearch的公司就此成立，他们一边提供商业支持一边开发新功能，不过Elasticsearch将永远开源且对所有人可用。

Shay的妻子依旧等待着她的食谱搜索……

谁在使用：

1、维基百科,类似百度百科，全文检索,高亮,搜索推荐/2
2、The Guardian (国外新闻网站) ,类似搜狐新闻,用户行为日志(点击,浏览,收藏,评论) +社交网络数据(对某某新闻的相关看法) ,数据分析,给到每篇新闻文章的作者,让他知道他的文章的公众反馈(好,坏,热门，垃圾,鄙视，崇拜)
3、Stack Overflow (国外的程序异常讨论论坛) , IT问题,程序的报错,提交上去,有人会跟你讨论和回答,全文检索,搜索相关问题和答案,程序报错了,就会将报错信息粘贴到里面去,搜索有没有对应的答案
4、GitHub (开源代码管理),搜索 上千亿行代码
5、电商网站,检索商品
6、日志数据分析, logstash采集日志, ES进行复杂的数据分析, ELK技术, elasticsearch+logstash+kibana
7、商品价格监控网站,用户设定某商品的价格阈值,当低于该阈值的时候,发送通知消息给用户,比如说订阅牙膏的监控,如果高露洁牙膏的家庭套装低于50块钱,就通知我,我就去买
8、BI系统,商业智能, Business Intelligence。比如说有个大型商场集团，BI ,分析一下某某区域最近3年的用户消费 金额的趋势以及用户群体的组成构成,产出相关的数张报表, **区,最近3年,每年消费金额呈现100%的增长,而且用户群体85%是高级白领，开-个新商场。ES执行数据分析和挖掘, Kibana进行数据可视化
9、国内:站内搜索(电商,招聘,门户,等等),IT系统搜索(OA,CRM,ERP,等等),数据分析(ES热门
的一一个使用场景)

ES和Solr

ElasticSearch简介
Elasticsearch是一个实时分布式搜索和分析引擎。 它让你以前所未有的速度处理大数据成为可能。
它用于全文搜索、结构化搜索、分析以及将这三者混合使用:
维基百科使用Elasticsearch提供全文搜索并高亮关键字,以及输入实时搜索(search-asyou-type)和搜索纠错(did-you-mean)等搜索建议功能。
英国卫报使用Elasticsearch结合用户日志和社交网络数据提供给他们的编辑以实时的反馈,以便及时了解公众对新发表的文章的回应。
StackOverflow结合全文搜索与地理位置查询,以及more-like-this功能来找到相关的问题和答案。
Github使用Elasticsearch检索1300亿行的代码。
但是Elasticsearch不仅用于大型企业，它还让像DataDog以及Klout这样的创业公司将最初的想法变成可扩展的解决方案。
Elasticsearch可以在你的笔记本上运行,也可以在数以百计的服务器上处理PB级别的数据。
Elasticsearch是一个基于Apache Lucene™的开源搜索引擎。无论在开源还是专有领域, Lucene可被认为是迄今为止最先进、性能最好的、功能最全的搜索引擎库。
但是, Lucene只是一个库。 想要使用它,你必须使用Java来作为开发语言并将其直接集成到你的应用中,更糟糕的是, Lucene非常复杂,你需要深入了解检索的相关知识来理解它是如何工作的。
Elasticsearch也使用Java开发并使用Lucene作为其核心来实现所有索引和搜索的功能,但是它的目的是通过简单的RESTful API来隐藏Lucene的复杂性,从而让全文搜索变得简单。

Solr简介
Solr是Apache下的一个顶级开源项目,采用Java开发,它是基于Lucene的全文搜索服务器。Solr提供了比Lucene更为丰富的查询语言,同时实现了可配置、可扩展，并对索引、搜索性能进行了优化
Solr可以独立运行,运行在letty. Tomcat等这些Selrvlet容器中 , Solr 索引的实现方法很简单,用POST方法向Solr服务器发送一个描述Field及其内容的XML文档, Solr根据xml文档添加、删除、更新索引。Solr 搜索只需要发送HTTP GET请求,然后对Solr返回xml、json等格式的查询结果进行解析,组织页面布局。
Solr不提供构建UI的功能, Solr提供了一个管理界面,通过管理界面可以查询Solr的配置和运行情况。
Solr是基于lucene开发企业级搜索服务器,实际上就是封装了lucene.
Solr是一个独立的企业级搜索应用服务器,它对外提供类似于Web-service的API接口。用户可以通过http请求,向搜索引擎服务器提交-定格式的文件,生成索引;也可以通过提出查找请求,并得到返回结果

二 .ElasticSearch与Solr比较

1.当单纯的对已有数据进行搜索时，Solr更快
在这里插入图片描述
2.当实时建立索引时，Solr会产生io阻塞，查询性能较差，ElasticSearch具有明显的优势
在这里插入图片描述
3.随着数据量的增加，Solr的搜索效率会变得更低，而ElasticSearch却没有明显的变化
在这里插入图片描述
总结
1、es基本是开箱即用(解压就可以用!) ,非常简单。Solr安装略微复杂一丢丢!
2、Solr 利用Zookeeper进行分布式管理,而Elasticsearch自身带有分布式协调管理功能>。
3、Solr 支持更多格式的数据,比如JSON、XML、 CSV ,而Elasticsearch仅支持json文件格式。
4、Solr 官方提供的功能更多,而Elasticsearch本身更注重于核心功能，高级功能多有第三方插件提供，例如图形化界面需要kibana友好支撑
5、Solr 查询快,但更新索引时慢(即插入删除慢) ，用于电商等查询多的应用;

ES建立索引快(即查询慢) ，即实时性查询快，用于facebook新浪等搜索。
Solr是传统搜索应用的有力解决方案，但Elasticsearch更适用于新兴的实时搜索应用。
6、Solr比较成熟，有一个更大，更成熟的用户、开发和贡献者社区，而Elasticsearch相对开发维护者较少,更新太快,学习使用成本较高

三、ElasticSearch安装

JDK8，最低要求
使用Java开发，必须保证ElasticSearch的版本与Java的核心jar包版本对应！（Java环境保证没错）

1. Windows下安装

下载地址：https://www.elastic.co/cn/downloads/
历史版本下载：https://www.elastic.co/cn/downloads/past-releases/
解压即可（尽量将ElasticSearch相关工具放在统一目录下）

2. 熟悉目录

在这里插入图片描述

bin 启动文件目录
config 配置文件目录
    1og4j2 日志配置文件
    jvm.options java 虚拟机相关的配置(默认启动占1g内存，内容不够需要自己调整)
    elasticsearch.ym1 elasticsearch 的配置文件! 默认9200端口!跨域!
1ib 
    相关jar包
modules 功能模块目录
plugins 插件目录
    ik分词器

3. 启动

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

4. 安装可视化界面

使用前提：需要安装nodejs
node Js安装：
https://www.cnblogs.com/liuqiyun/p/8133904.html

elasticsearch-head
  1. 下载地址
    https://github.com/mobz/elasticsearch-head
  2. 安装
    解压即可（尽量将ElasticSearch相关工具放在统一目录下）
  3. 启动
cd elasticsearch-head
# 安装依赖
npm install
# 启动
npm run start
# 访问
http://localhost:9100/

安装依赖
cnpm 配置淘宝镜像加速器
在这里插入图片描述
运行
在这里插入图片描述
访问
存在跨域问题（只有当两个页面同源，才能交互）
同源（端口，主机，协议三者都相同）
https://blog.csdn.net/qq_38128179/article/details/84956552

在这里插入图片描述
开启跨域（在elasticsearch解压目录config下elasticsearch.yml中添加）

# 开启跨域
http.cors.enabled: true
# 所有人访问
http.cors.allow-origin: "*"

再次连接
在这里插入图片描述
如何理解上图：

如果你是初学者
索引 可以看做 “数据库”
类型 可以看做 “表”
文档 可以看做 “库中的数据（表中的行）”
这个head，我们只是把它当做可视化数据展示工具，之后所有的查询都在kibana中进行
因为不支持json格式化，不方便
李哈ha
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
ElasticSearch特点|B+Tree|lucene倒排索引结构|lucene与elasticsearch的关系|基本概念
SmallScorpion
05-09 1498
ElasticSearch特点 1. 天然分片，天然集群： es 把数据分成多个shard，下图中的P0-P2，多个shard可以组成一份完整的数据，这些shard可以分布在集群中的各个机器节点中。随着数据的不断增加，集群可以增加多个分片，把多个分片放到多个机子上，已达到负载均衡，横向扩展。 这种集群分片的机制造就了elasticsearch强大的数据容量及运算扩展性。 在实际运算过程中，每个查询任务提交到某一个节点，该节点必须负责将数据进行整理汇聚，再返回给客户端，也就是一个简单的节点上进行Map计算，
elasticsearch demo详解
qbian的博客
05-14 2476
功能列表 一、用spring boot搭建的后端框架 二、页面渲染在后端，用的是thymeleaf模版引擎 三、前端使用angularJs实现数据视图的双向绑定，并且用的angular自带的resource模块请求restful接口 四、提供了提交数据的页面和相关接口 五、提供了多条件查询的页面和相关接口 六、提供了查询结果匹配高亮...
手把手搭建springboot项目06-springboot整合Elasticsearch及其demo
DD-Blog
03-31 679
springboot整合elasticsearch docker安装es docker安装kibana es的查询与过滤 ik分词器的安装 es的聚合查询
史上最全Elasticsearch学习
九离的博客
03-23 7452
Elasticsearch 一、Elasticsearch简介&安装 1.1、Elasticsearch是什么？ The Elastic Stack, 包括 Elasticsearch、Kibana、Beats 和 Logstash（也称为 ELK Stack）。能够安全可靠地获取任何来源、任何格式的数据，然后实时地对数据进行搜索、分析和可视化。Elaticsearch，简称为 ES， ES 是一个开源的高扩展的分布式全文搜索引擎，是整个 Elastic Stack 技术栈的核心。它可以近乎实时
Elasticsearch 详细介绍和经典应用
最新发布
Coder加油站的专栏
04-26 1231
Elasticsearch 是一个基于 Lucene 库的开源、分布式、RESTful 搜索和分析引擎。它提供了一个分布式、可扩展的全文搜索和实时分析平台,可以用于各种应用场景,如全文搜索、结构化搜索、分析、日志处理等。
ElasticSearch搜索demo
weixin_30918415的博客
04-06 201
ElasticSearch版本:1.4.1 分词:ik jdk：1.7.67 开发工具:Eclipse 系统:win7 忙活了几天，使用ES做成，就是页面有点丑，demo页面如下： 1.搜索主页 2.搜索结果页 欢迎大家提出宝贵意见，共同学习。 转载于:https://www.cnblogs.com/luweiwei/p/...
《算法》-查找[二叉查找树]
m0_37748303的博客
09-06 408
二叉查找树 二叉查找树是具有有以下性质的二叉树： 若左子树不为空，则左子树上所有节点的值均小于或等于它的根节点的值。 若右子树不为空，则右子树上所有节点的值均大于或等于它的根节点的值。 左、右子树也分别为二叉查找树。 没有键值相等的节点。 复杂度： 算法 平均 平均 空间 O(n) O(n) 搜索 O(log n) O(n) 插入 O(log n) O(n) 删除 O(log n) O(n) 定义节点 class BinarySearchTree(object):
es入门操作-elasticsearch入门操作
12-27
"Elasticsearch 入门操作" Elasticsearch 是一个基于 Lucene 库的搜索引擎，提供了一个分布式、支持多用户的全文搜索引擎，具有 HTTP Web 接口和无模式 JSON 文档。所有其他语言可以使用 RESTful API 通过端口 9200...
elasticsearch基础入门.pptx
08-16
Elasticsearch（简称ES）是一种基于Lucene的开源搜索引擎，主要设计用于分布式、实时的文档存储和搜索。它不仅能够高效地处理结构化和非结构化的数据，还提供了数据分析的功能，使得用户可以在海量数据中快速获取...
Elasticsearch入门学习笔记
06-28
Elasticsearch 是一款功能强大的开源全文搜索引擎，常用于大数据分析和实时检索场景。这篇入门学习笔记将引导初学者了解如何安装、配置以及使用Elasticsearch。 首先，让我们从安装开始。要安装Elasticsearch，你...
原来 Elasticsearch 还可以这么理解
MarkerHub的博客
02-23 573
来源：cnblogs.com/jajian/p/11223992.html生活中的数据先说说Lucen核心概念基本使用性能优化存储设备内部索引优化调整配置参数JVM调优由于近期在公司内部做...
SpringBoot整合ElasticSearch起步Demo
缄墨的博客
08-12 515
参考资料 docker部署ElasticSearch：https://blog.csdn.net/qq_40942490/article/details/111594267 springboot集成es测试Demo：https://mp.csdn.net/mp_blog/creation/editor 正题 1.docker部署es 1.1.修改max_map_count #查看max_map_count的值 默认是65530 cat /proc/sys/vm/max_map_count #重
SpringBoot 集成 ElasticSearch - Demo
魂-淡
08-09 1661
代码参考慕课网《ElasticSearch入门》 索引创建 "mappings": { "novel": { "properties": { "word_count": { "type": "integer" }, "author": {
ElasticSearch详解
m0_37767351的博客
03-16 1425
Elasticsearch全称叫全文搜索引擎，简称ES，一个分布式可扩展的实时搜索和分析引擎,一个建立在搜索引擎 Apache Lucene(TM) 基础上的搜索引擎。Elasticsearch 也是使用 Java 编写的，它的内部使用 Lucene 做索引与搜索，但是它的目的是使全文检索变得简单。 Elasticsearch 不仅仅是 Lucene，并且也不仅仅只是一个全文搜索引擎。 它可以被下面这样准确的形容： 1、一个分布式的实时文档存储，每个字段可以被索引与搜索 2、一个分布式实时分析搜索引擎
ElasticSearch
l10711097061的博客
06-22 1507
title: ElasticSearch author: zed 一、引言 1.1 海量数据 在海量数据中执行搜索功能时，如果使用MySQL，效率太低。 1.2 全文检索 在海量数据中执行全文搜索时，如果使用MySQL，效率太低。 1.3 高亮显示 将搜索关键字，以红色的字体展示。 二、ES概述 2.1 ES的介绍 ES是一个使用Java语言并且基于Lucene编写的搜索引擎框架，他提供了分布式的全文搜索功能，提供了一个统一的基于RESTful风格的WEB接口，官方客户端也对多种
项目中使用es（一）：使用springboot操作elasticsearch
站在墙头上的博客
05-30 2552
ElasticsearchRepository操作es和ElasticsearchRestTemplate操作es
SpringBoot操作ES进行各种高级查询（值得收藏）
2401_84009317的博客
04-03 984
我想问下大家当初选择做程序员的初衷是什么？有思考过这个问题吗？高薪？热爱？既然入了这行就应该知道，这个行业是靠本事吃饭的，你想要拿高薪没有问题，请好好磨练自己的技术，不要抱怨。有的人通过培训可以让自己成长，有些人可以通过自律强大的自学能力成长，如果你两者都不占，还怎么拿高薪？架构师是很多程序员的职业目标，一个好的架构师是不愁所谓的35岁高龄门槛的，到了那个时候，照样大把的企业挖他。为什么很多人想进阿里巴巴，无非不是福利待遇好以及优质的人脉资源，这对个人职业发展是有非常大帮助的。
Elasticsearch入门指南：特性与实战
Elasticsearch(简称ES)是一个由Java编写，并基于Apache Lucene构建的开源全文搜索引擎。它的核心特性包括分布式、实时、可扩展和高度容错性，使得ES能够轻松处理大量数据并提供高效的搜索服务。ES不仅支持全文检索，...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值