ElasticSearch（分布式搜索引擎）

最新推荐文章于 2024-10-31 17:08:25 发布
最新推荐文章于 2024-10-31 17:08:25 发布
阅读量52 收藏
点赞数
文章标签： 搜索引擎 elasticsearch 分布式
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Abaonanermy/article/details/131517903
版权

ElasticSearch（分布式搜索引擎）

一、什么是RestFul?

1.1 基本概念

RestFul：软件架构设计风格（一个架构的设计如果遵循Rest设计原则，那么称RestFul）

Rest：资源的表现层状态转化（设计思路）

资源：网络中的一切事物（图片、音乐、数据库记录）

表现层：将资源具体呈现出来的形式

状态转化：如果客户端想操作服务器的资源时，使资源发生某种状态转变

1.2 原则

1.使用Rest的url代替传统的url

传统：localhost:8080/项目名/user/findOne?id=22

Rest：localhost:8080/项目名/user/findOne/22

2.四种请求动词对象服务器的四种操作（CRUD）

GET：查询

POST：更新 | 添加

PUT：更新 | 添加

DELETE：删除

<span style="background-color:#f8f8f8"><span style="color:#333333"><span style="color:#000000">示例：</span>
    <span style="color:#555555">@Controller</span>
    <span style="color:#555555">@RequestMapping</span>(<span style="color:#aa1111">"user"</span>)
    <span style="color:#770088">public</span> <span style="color:#770088">class</span> <span style="color:#0000ff">UserController</span>{
        <span style="color:#aa5500">/**</span>
         <span style="color:#aa5500">* 演示RestFul风格请求查询</span>
         <span style="color:#aa5500">*/</span>
        <span style="color:#555555">@GetMapping</span>(<span style="color:#aa1111">"findOne/{id}/{name}/"</span>)
        <span style="color:#555555">@ResponseBody</span>
        <span style="color:#770088">public</span> <span style="color:#008855">String</span> <span style="color:#000000">findOne</span>(<span style="color:#555555">@PathVariable</span>(<span style="color:#aa1111">"id"</span>)<span style="color:#008855">String</span> <span style="color:#000000">id</span>,
                              <span style="color:#555555">@PathVariable</span>(<span style="color:#aa1111">"name"</span>)<span style="color:#008855">String</span> <span style="color:#000000">name</span>){
            <span style="color:#770088">return</span> <span style="color:#aa1111">"演示restful风格传参"</span>;
        }
    }
<span style="color:#000000">请求地址：</span>
    <span style="color:#000000">http</span>:<span style="color:#aa5500">//localhost:8080/项目名/user/findOne/21/张三/</span></span></span>

二、什么是全文检索？

2.1 概念

全文检索：是指计算机程序扫描文章的每一个词，对每一个词建立一个索引，指明该词在文章中出现的次数和位置，当用户查询时根据建立的索引查找，类似于通过字典的检索字表查字的过程。

关于全文检索，我们要知道

  1. 只处理文本

  2. 不处理语义

  3. 搜索时英文不区分大小写

  4. 结果列表中有相关的排序

三、ElasticSearch

3.1 概念

简称ES，是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java语言开发的，并作为Apache许可条款下的开放源码发布，是一种流行的企业级搜索引擎。

四、ES的安装配置

4.1 安装前提

安装配置JDK1.8+（步骤省略）

4.2 安装ES

注意：ES安装配置时不允许使用root账户，只能使用普通用户

<span style="background-color:#f8f8f8"><span style="color:#333333"><span style="color:#aa5500"># 1.下载ES linux版本安装包 </span>
    https://www.elastic.co/cn/downloads/past-releases/elasticsearch-6-8-0
<span style="color:#aa5500"># 2.创建用户组及普通用户并以普通用户身份进行登录</span>
<span style="color:#aa5500"># 3.上传es安装包到linux</span>
<span style="color:#aa5500"># 4.使用tar -zxvf 解压上传的安装包</span>
​
<span style="color:#aa5500">#权限不足问题解决方案：</span>
<span style="color:#3300aa">chown</span> <span style="color:#0000cc">-R</span> zhangsan:u         /usr/local/software/elasticsearch-6.8.0
<span style="color:#3300aa">chown</span> <span style="color:#0000cc">-R</span> 用户:用户组   文件的路径
​
<span style="color:#aa5500"># 5.安装完成后切换到安装目录的bin目录，执行脚本 .elasticserach执行前台启动即可</span>
<span style="color:#aa5500"># 6.web访问端口：9200    tcp端口：9300（java进行连接）</span>
<span style="color:#aa5500"># 7.通过curl http://localhost:9200 查看网页源码测试是否可以访问</span></span></span>

4.3 开启远程连接权限

注意：ES服务默认启动是受保护的，只允许本地客户端连接，如果需要通过远程客户端访问，必须开启远程连接

  1. 开启ES远程访问

    进入es安装目录的config目录下，使用vim指令编辑elasticSearch.yml文件，将原来的network.host修改为 0.0.0.0

  2. 进入安装目录的bin目录，执行./elasticsearch 脚本启动es

  3. 重新启动后会出现以下错误

    <span style="background-color:#f8f8f8"><span style="color:#221199">ERROR</span><span style="color:#555555">: [</span>3<span style="color:#555555">]</span> bootstrap checks failed
<span style="color:#555555">[</span><span style="color:#221199">1]</span><span style="color:#555555">: </span>max file descriptors <span style="color:#555555">[</span>4096<span style="color:#555555">]</span> for elasticsearch process is too low<span style="color:#555555">,</span> increase to at least <span style="color:#555555">[</span>65536<span style="color:#555555">]</span>
<span style="color:#555555">[</span><span style="color:#221199">2]</span><span style="color:#555555">: </span>max number of threads <span style="color:#555555">[</span>3836<span style="color:#555555">]</span> for user <span style="color:#555555">[</span>wuzhaobin<span style="color:#555555">]</span> is too low<span style="color:#555555">,</span> increase to at least <span style="color:#555555">[</span>4096<span style="color:#555555">]</span>
<span style="color:#555555">[</span><span style="color:#221199">3]</span><span style="color:#555555">: </span>max virtual memory areas vm.max_map_count <span style="color:#555555">[</span>65530<span style="color:#555555">]</span> is too low<span style="color:#555555">,</span> increase to at least <span style="color:#555555">[</span>262144<span style="color:#555555">]</span></span>

  1. 解决错误[1]

    <span style="background-color:#f8f8f8"><span style="color:#aa5500"># 4-1：使用root用户修改系统配置</span>
<span style="color:#aa5500"># 4-2：vim /etc/security/limits.conf 在文件末尾添加如下配置：</span>
​
*                soft    nofile          <span style="color:#116644">65536</span>
*                hard    nofile          <span style="color:#116644">65536</span>
*                soft    nproc           <span style="color:#116644">4096</span>
*                hard    nproc           <span style="color:#116644">4096</span>
<span style="color:#aa5500"># 4-3：退出终端，然后再进入终端，检测配置是否生效，逐条执行以下命令即可，如果检测的信息和[4-2]中配置的信息一致说明配置正确</span>
    ulimit <span style="color:#0000cc">-Hn</span>
    ulimit <span style="color:#0000cc">-Sn</span>
    ulimit <span style="color:#0000cc">-Hu</span>
    ulimit <span style="color:#0000cc">-Su</span>
    </span>

  2. 解决错误[2]

    <span style="background-color:#f8f8f8"><span style="color:#aa5500"># 5-1：使用root用户修改系统配置</span>
<span style="color:#aa5500"># 5-2: vim /etc/security/limits.d/20-nproc.conf</span>
<span style="color:#aa5500"># 5-3: 将 * 修改为启动es的用户名</span></span>

  3. 解决错误[3]

    <span style="background-color:#f8f8f8"><span style="color:#aa5500"># 6-1：使用root用户修改系统配置</span>
<span style="color:#aa5500"># 6-2: vim /etc/sysctl.conf</span>
<span style="color:#aa5500"># 6-3: 在sysctl.conf配置文件中加入下面配置保存退出即可</span>
    vm<span style="color:#0000ff">.max_map_count</span><span style="color:#981a1a">=</span><span style="color:#116644">655360</span>
<span style="color:#aa5500"># 6-4：输入sysctl -p 检测是否配置正确</span>
<span style="color:#aa5500"># 6-5：关闭终端再次进入终端</span></span>

  4. 注意：防火墙ssh.xml中记得开放es端口，否则还是无法远程连接，配置完开发端口后记得重启防火墙。

    <span style="background-color:#f8f8f8">通过外部浏览器访问es，出现下面内容说明远程连接已经开启
{
  "name" : "pl1UXjc",
  "cluster_name" : "elasticsearch",
  "cluster_uuid" : "Y4i82Cs6RgW7mfbohZy2qg",
  "version" : {
    "number" : "6.8.0",
    "build_flavor" : "default",
    "build_type" : "tar",
    "build_hash" : "65b6179",
    "build_date" : "2019-05-15T20:06:13.172855Z",
    "build_snapshot" : false,
    "lucene_version" : "7.7.0",
    "minimum_wire_compatibility_version" : "5.6.0",
    "minimum_index_compatibility_version" : "5.0.0"
  },
  "tagline" : "You Know, for Search"
}</span>

 

outer part
关注
ElasticSearch分布式搜索引擎在天文大数据检索中的应用研究.pdf
07-22
### ElasticSearch分布式搜索引擎在天文大数据检索中的应用研究 #### 一、引言 随着现代天文观测技术的进步，尤其是大型天文望远镜的广泛部署，每天都会产生大量的天文观测数据。这些数据大多以FITS（Flexible ...
ElasticSearch分布式搜索引擎 v7.9.0
11-04
为您提供ElasticSearch分布式搜索引擎下载，Elasticsearch是一个分布式的RESTful风格的搜索和数据分析引擎，能够解决越来越多的用例。作为Elastic Stack的核心，它集中存储您的数据，帮助您发现意料之中以及意料之外...
ElasticSearch 分布式搜索引擎
weixin_38978094的博客
08-21 5400
ElasticSearch 分布式搜索引擎，读写底层原理，图文并茂！
分布式搜索引擎ES-elasticsearch入门
TOMORROW6COME的博客
07-18 1537
正排索引：相当于文档中的一条条记录；例子：汉语值得学习；汉语是语言；汉语学习视频；倒排索引：起源于实际应用中需要根据属性的值来查询记录。这种索引表的每一项都包括一个属性值和包含该属性值得各个记录地址。由于不是根据记录来确定属性，而是根据属性来确定记录的位置。可以记录文档的ids，词频跟位置例子：汉语值得学习；汉语是语言；汉语学习视频；单词文档ids词频TF;位置POS汉1,2,3语1,2,3值得11:1:<3>学习1,3是21:1;<3>言2。
分布式搜索引擎之Elasticsearch
CherryXieのblog
05-25 1114
Elasticsearch是一个开源的分布式搜索和分析引擎，用于处理大规模数据的搜索、分析和可视化。它是基于Apache Lucene库构建的，提供了强大的全文搜索、实时数据分析和复杂查询的功能。
本地部署Elasticsearch分布式搜索引擎结合内网穿透实现远程搜索
Easonmax的博客
07-06 773
本文主要介绍如何在Windows系统安装分布式搜索和分析引擎Elasticsearch，并结合Cpolar内网穿透工具实现无公网IP远程访问使用。Elasticsearch是一个基于Lucene库的分布式搜索和分析引擎，它提供了一个分布式、多租户的全文搜索引擎，具有HTTP Web接口和无模式JSON文档,同时也是是一个非常强大的工具，可以用于各种用途，例如日志分析、搜索引擎、安全分析等等。远程连接的好处在于可以让用户从远程位置访问Elasticsearch集群，这样可以方便地进行数据查询和管理。
为什么选择elasticsearch分布式搜索引擎
怀着一颗学徒的心
08-21 3662
elasticsearch是一款非常强大的开源搜索引擎，具备非常多强大功能，可以帮助我们从海量数据中快速找到需要的内容例如：在CSDN上搜索代码在电商网站搜索商品在百度搜索答案什么是elasticsearch？一个开源的分布式搜索引擎，可以用来实现搜索、日志统计、分析、系统监控等功能什么是elastic stack（ELK）？是以elasticsearch为核心的技术栈，包括beats、Logstash、kibana、elasticsearch什么是Lucene？
ElasticSearch分布式搜索引擎入门
#helloworld的博客
09-04 748
Elasticsearch是一个基于 Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java语言开发的，并作为Apache许可条款下的开放源码发布， 是一种流行的企业级搜索引擎。Elasticsearch用于云计算中，能够达到实时搜索，稳定，可靠，快速， 安装使用方便。官方客户端在Java、.NET（C#）、PHP、Python、Apache Groovy、Ruby和许多其他语言中都是可用的。
ElasticSearch分布式搜索引擎安装教程
热门推荐
小Du猿的博客
03-10 18万+
ElasticSearch分布式搜索引擎安装教程 ​ 专注小Du博客，每天分享干货知识。CSDN博客地址： 在正式开始安装教程之前，小Du先带大家来了解什么是ElasticSearch。 一.Hr：ElasticSearch是什么？ ​ 答：Elasticsearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java语言开发的，并作为Apache许可条款下的开放源码发布，是一种流行的企业级
Elasticsearch 分布式搜索引擎
Kevin yan的专栏
10-15 666
Elasticsearch 分布式搜索引擎 简介 使用 Lucene 作为内部引擎 不仅包括了全文搜索功能，还可以进行以下工作: 分布式实时文件存储，并将每一个字段都编入索引，使其可以被搜索。 可以扩展到上百台服务器，处理PB级别的结构化或非结构化数据。 RESTful API Elasticsearch上手是简单。整个引擎可以很灵活地进行配置。你可以根据自身需求来定制属于你自己的 Elastic...
分布式搜索引擎ES--Elasticsearch集群
TOMORROW6COME的博客
07-25 1354
在最新版7.x中，minimum_master_node这个参数已经被移除了，这一块内容完全由es自身去管理，这样就避免了脑裂的问题，选举也会非常快。N为集群的中master节点的数量，也就是那些 node.master=true 设置的那些服务器节点总数。同一个分片的主与副本是不会放在同一个服务器里的，因为一旦宕机，这个分片就没了；每个主分片都包含索引的数据，由于目前是单机，所以副分片是没有的，集群健康值显示为黄色。克隆以后，先将es中的打他目录，一定要清空，这里面包含了原先的索引库数据。
分布式搜索引擎 ElasticSearch（ES）
yueyue763184的博客
12-02 6705
elasticsearch是一款非常强大的开源搜索引擎，具备非常多强大功能，可以帮助我们从海量数据中快速找到需要的内容。elasticsearch结合、Logstash、Beats，也就是elastic stack（ELK），被广泛应用在日志数据分析、实时监控等领域。而elasticsearch是elastic stack的核心，负责存储、搜索、分析数据。
ElasticSearch分布式搜索引擎 v7.17.18.zip
03-21
**Elasticsearch分布式搜索引擎 v7.17.18** Elasticsearch是一个开源的、高度可扩展的全文搜索引擎，基于Lucene构建，旨在提供实时、分布式、容错能力强的搜索和数据分析能力。在v7.17.18版本中，Elasticsearch继续...
ElasticSearch分布式搜索引擎 v8.2.2
06-23
Elasticsearch 是一个分布式的免费开源搜索和分析引擎，适用于包括文本、数字、地理空间、结构化和非结构化数据等在内的所有类型的数据。Elasticsearch 在 Apache Lucene 的基础上开发而成，由 Elasticsearch N.V....
ElasticSearch分布式搜索引擎 v6.7.1.zip
03-21
这个压缩包“ElasticSearch分布式搜索引擎 v6.7.1.zip”包含的是Elasticsearch的源代码和相关文档，对于学习和研究Elasticsearch的内部工作原理，以及进行毕业设计或系统软件开发是非常有价值的资源。 首先，我们来...
手游和应用出海资讯：可灵AI独立APP即将上架；Rollic在英国推出芭比合并解谜手游
最新发布
yingxiao888的博客
10-31 985
这款新游戏将游戏玩法与翻新机制相融合，类似玩法在许多益智游戏中都有出现，如Playrix的《Homescapes》和《Gardenscapes》，以及Trailmix的《Love & Pies》。10月25日消息，微软在收购动视暴雪后，现已拥有20个游戏专营权，这些游戏的销售和内购收入至少达到了10亿美元。在年度报告中，微软提到，包括《糖果传奇》、《暗黑破坏神》、《光环》、《魔兽争霸》、《上古卷轴》和《战争机器》等20款系列游戏，为公司带来了可观的收入。● 微软已拥有20个游戏IP，收入达10亿美元。
广东网站设计提升你网站在搜索引擎中的排名
做网站建设设计小程序推广鸿运通
10-31 588
当用户在浏览网站时，流畅的导航和吸引人的视觉设计能够有效减少跳出率，增加用户的停留时间。若用户在您的网站上花费更多的时间，搜索引擎便会认为您的内容更具价值，从而提升排名。特别是对于广东地区的企业来说，网站设计不仅仅是美观的问题，更直接影响着搜索引擎中的排名。其次，网站的结构和布局也至关重要。创建清晰的导航菜单、使用面包屑导航和合理分类的网页设计，能有效提升搜索引擎的抓取效率，进一步优化网站排名。这些因素不仅提升用户的访问满意度，更能有效提高网站在搜索引擎中的排名，为企业的发展开辟更广阔的道路。
搜索引擎语法大全（Google、bing、baidu）
2201_75446043的博客
10-31 1277
搜索引擎语法通常指的是在搜索引擎中使用特定的运算符和语法来优化搜索结果。
人工智能原理实验一：知识的表示与推理实验
m0_64146991的博客
10-30 977
有n个牧师和n个野人准备渡河，但只有一条能容纳c个人的小船，为了防止野人侵犯牧师，要求无论在何处，牧师的人数不得少于野人的人数(除非牧师人数为0)，且假定野人与牧师都会划船，试设计一个算法，确定他们能否渡过河去，若能，则给出小船来回次数最少的最佳方案。问题的初始状态可表示为：So：AT(monkey,a)->EMPTY(monkey)->ON(box,c)->ON(banana,ceiling)->CLEAR(b)->BOX(box)->BANANA(banana)AT(x,w)：x在w处，个体域：x?
Elasticsearch分布式搜索引擎的设计理念
"这篇分享来自Elasticsearch的创始人Shay Banon，主要探讨了Elasticsearch的设计思路，包括其分布式、近实时搜索引擎的核心概念，以及与Lucene的关系。" 在深入Elasticsearch的设计之前，首先需要理解其基础——...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值