Elasticsearch实例操作

已于 2022-02-23 11:50:49 修改
阅读量1.8k 收藏 1
点赞数
分类专栏： codeigniter Elasticsearch 文章标签： elasticsearch 搜索引擎 大数据
于 2021-12-20 16:23:16 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wyqgg123/article/details/122044231
版权

前提条件本机运行了elasticsearch服务

安装Elasticsearch php插件
composer require elasticsearch/elasticsearch
基本的新增、删除索引
//加载Elasticsearch php插件
require "vendor/autoload.php";

use \Elasticsearch\ClientBuilder;

//本机host
$hosts = [
    '127.0.0.1:9200'
];
//连接
$client = ClientBuilder::create()->setHosts($hosts)->build();

$params = [
    //索引名
    'index' => 'artlce',
    'body' => [
        'settings' => [
            //分区数
            'number_of_shards' => 5,
            //副本数
            'number_of_replicas' => 1
        ],
        'mappings' => [
            //文档
            '_doc' => [
                '_source' => [
                    'enabled' => true
                ],
                'properties' => [
                    //文档的字段以及字段的类型
                    'anchor' => [
                        //keyword类型的字段只能通过精确值搜索到
                        'type' => 'keyword'
                    ],
                    'title' => [
                  		'type' => 'text',
                        //ik分词器的ik_max_word模式
                        'analyzer' => 'ik_max_word',
                        'search_analyzer' => 'ik_max_word'
                    ],
                    'desn' => [
                        'type' => 'text',
                        //ik分词器的ik_max_word模式
                        'analyzer' => 'ik_max_word',
                        'search_analyzer' => 'ik_max_word'
                    ]
                ]
            ]
        ]
    ]
];
// 创建索引
$response = $client->indices()->create($params);


//删除索引
$params1 = ['index' => 'artlce'];
$response1 = $client->indices()->delete($params1);
ik分词器

1、ik_max_word: 会将文本做最细粒度的拆分，比如会将“中华人民共和国国歌”拆分为“中华人民共和国,中华人民, 中华,华人,人民共和国,人民,人,民,共和国,共和,和国,国歌”，会穷尽各种可能的组合；

2、ik_smart: 会做最粗粒度的拆分，比如会将“中华人民共和国国歌”拆分为“中华人民,共和国,国歌”。 索引时，为了提供索引的覆盖范围，通常会采用ik_max_word分析器，会以最细粒度分词索引，搜索时为了提高搜索准确度，会采用ik_smart分析器，会以粗粒度分词

创建索引成功

在这里插入图片描述

基本的文档的操作
//加载Elasticsearch php插件
require "vendor/autoload.php";

use \Elasticsearch\ClientBuilder;

//本机host
$hosts = [
    '127.0.0.1:9200'
];
//连接
$client = ClientBuilder::create()->setHosts($hosts)->build();
//新增文档到索引中
$params2 = [
    //索引
    'index' => 'artlce',
    //类型 es6之后一个索引对应一个type
    'type' => '_doc',
    //文档id
    'id' => 1,
    //字段值
    'body' => [
        'anchor' => 'wyq',
        'title' => '这是一篇文章',
        'desn' => '这是一篇文章的简介',
    ],
];
$response = $client->index($params2);


//修改指定索引指定文档的内容
$params3 = [
    //索引
    'index' => 'artlce',
    //类型 es6之后一个索引对应一个type
    'type' => '_doc',
    //文档id
    'id' => 1,
    //字段值
    'body' => [
        'anchor' => 'wyq123',
    ],
];
$response = $client->update($params3);

//删除指定索引的文档
$params3 = [
    //索引
    'index' => 'artlce',
    //文档id
    'id' => 1,
];
$response = $client->delete($params3);


//查询索引文档的内容
$params4 = [
    'index' => "artcle",
    'body' => [
        'query' => [
            'match' => [
                'title' => "这是一篇"
            ]
        ]
    ]
];
$response = $this->client->search($params4);

在这里插入图片描述

在这里插入图片描述

集成到CI框架中

和之前的redis一样封装一个类，里面编写一些经常用到的Elasticsearch方法,之前在thinkphp5框架中封装过。

//libraries目录下的es类
<?php
/**
 * Created by PhpStorm.
 * User: wyq
 * Date: 2021/12/17
 * Time: 14:29
 */

require "vendor/autoload.php";

use \Elasticsearch\ClientBuilder;
use Elasticsearch\Common\Exceptions\BadRequest400Exception;
use Elasticsearch\Common\Exceptions\Missing404Exception;

//封装es工具类
class ES
{
    private $client = [];

    //构造函数中连接Es
    public function __construct()
    {
        $this->client = ClientBuilder::create()->setHosts(config_item('esHost'))->build();
    }

    public function getEs()
    {
        return $this->client;
    }

    /**
     * 创建索引
     * @param string $indexName 索引名
     * @param int $number_of_shards 分区数
     * @param int $number_of_replicas 副本数
     * @param array $data 字段数组
     * @return array
     */
    public function createIndex($indexName = "", $number_of_shards = 5, $number_of_replicas = 1, $data = [])
    {
        // 创建索引
        $params = [
            'index' => $indexName,
            'body' => [
                'settings' => [
                    'number_of_shards' => $number_of_shards,
                    'number_of_replicas' => $number_of_replicas
                ],
                'mappings' => [
                    '_doc' => [
                        '_source' => [
                            'enabled' => true
                        ],
                        'properties' => $data
                    ]
                ]
            ]
        ];
        try {
            $response = $this->client->indices()->create($params);
            $res = [
                'code' => 200,
                'message' => "success",
                'data' => $response
            ];
        } catch (BadRequest400Exception $exception) {
            $res = [
                'code' => $exception->getCode(),
                'message' => json_decode($exception->getMessage(), true),
                'data' => [],
            ];
        }
        return $res;
    }

    /**
     * 删除索引
     * @param string $indexName 索引名
     */
    public function delIndex($indexName = "")
    {
        $data = ['index' => $indexName];
        try {
            $response = $this->client->indices()->delete($data);
            $res = [
                'code' => 200,
                'message' => "success",
                'data' => $response
            ];
        } catch (Missing404Exception $exception) {
            $res = [
                'code' => $exception->getCode(),
                'message' => json_decode($exception->getMessage(), true),
                'data' => [],
            ];
        }
        return $res;
    }

    /**
     * 保存doc
     * @param string $indexName 索引名
     * @param int $id 新增、修改的文档id
     * @param array $data 新增、修改的文档数据
     */
    public function SaveDoc($indexName = "", int $id, $data = [])
    {
        // 写文档
        $params = [
            'index' => $indexName,
            'type' => '_doc',
            'id' => $id,
            'body' => $data,
        ];

        try {
            $response = $this->client->index($params);
            $res = [
                'code' => 200,
                'message' => "success",
                'data' => $response
            ];
        } catch (Missing404Exception $exception) {
            $res = [
                'code' => $exception->getCode(),
                'message' => json_decode($exception->getMessage(), true),
                'data' => [],
            ];
        }
        return $res;
    }

    /**
     * 删除doc
     * @param string $indexName 索引名
     * @param int $id 文档id
     * @return array
     */
    public function deleteDoc($indexName = "", int $id)
    {
        $data = [
            'index' => $indexName,
            'id' => $id,
        ];
        try {
            $response = $this->client->delete($data);
            $res = [
                'code' => 200,
                'message' => "success",
                'data' => $response
            ];
        } catch (Missing404Exception $exception) {
            $res = [
                'code' => $exception->getCode(),
                'message' => json_decode($exception->getMessage(), true),
                'data' => [],
            ];
        }
        return $res;
    }

    /**
     * 修改doc
     * @param string $indexName
     * @param int $id
     * @param array $data
     * @return array
     */
    public function updateDoc($indexName = "", int $id, $data = [])
    {
        //修改指定索引指定文档的内容
        $params = [
            //索引
            'index' => $indexName,
            //类型 es6之后一个索引对应一个type
            'type' => '_doc',
            //文档id
            'id' => $id,
            //字段值
            'body' => [
                'doc' => [
                    $data
                ]
            ],
        ];
        try {
            $response = $this->client->update($params);
            $res = [
                'code' => 200,
                'message' => "success",
                'data' => $response
            ];
        } catch (Missing404Exception $exception) {
            $res = [
                'code' => $exception->getCode(),
                'message' => json_decode($exception->getMessage(), true),
                'data' => [],
            ];
        }
        return $res;
    }

    /**
     * @param string $indexName
     * @param array $body
     * @return array
     */
    public function searchDoc($indexName = "", $body =[])
    {
        $params = [
            'index' => $indexName,
            'body' => $body,
        ];
        try {
            $response = $this->client->search($params);
            $res = [
                'code' => 200,
                'message' => "success",
                'data' => $response
            ];
        } catch (Missing404Exception $exception) {
            $res = [
                'code' => $exception->getCode(),
                'message' => json_decode($exception->getMessage(), true),
                'data' => [],
            ];
        }
        return $res;
    }
}
创建索引
//控制器Api下面的代码
public function createIndex()
    {
       //获取上面的es功能类
        $es = getEs();
        $data = [
            //文档的字段以及字段的类型
            'uses_id' => [
                'type' => 'integer'
            ],
            'nickname' => [
                //keyword类型的字段只能通过精确值搜索到
                'type'=> 'keyword'
            ],
            'pageViews' => [
                'type' => 'integer'
            ],
            'likes' => [
                'type' => 'integer'
            ],
            'title' => [
                'type' => 'text',
                //ik分词器的ik_max_word模式
                'analyzer' => 'ik_max_word',
                'search_analyzer' => 'ik_max_word'
            ],
            'content' => [
                'type' => 'text',
                //ik分词器的ik_max_word模式
                'analyzer' => 'ik_max_word',
                'search_analyzer' => 'ik_max_word'
            ],
            'create_time' => [
                'type' => 'integer'
            ],
            'update_time' => [
                'type' => 'date',
                //date的格式
                "format" => "yyyy-MM-dd HH:mm:ss||yyyy-MM-dd||epoch_millis"
            ],
        ];
    	//创建索引
       $res = $es->createIndex('articles',5,1,$data);
        if ($res) {
            success($res);
        }
        fail($res);
    }

结果

在这里插入图片描述

将全部的文章放入es中

这里面的字段都是检索之后需要展示的字段，其他不需要展示的字段为放入es中

//控制器 Job/job下的代码
public function articleToes()
    {
        $article = $this->article_model->findAll();
        $es = getEs();
        foreach ($article as $v) {
            $data = [
                'user_id' => $v['user_id'],
                'nickname' => $v['nickname'],
                'desc' => $v['desc'],
                'content' => $v['content'],
                'title' => $v['title'],
                'pageViews' => $v['pageViews'],
                'likes' => $v['likes'],
                'create_time' => $v['create_time'],
                'update_time' => date('Y-m-d H:i:s', $v['update_time'])
            ];
            $es->SaveDoc('articles', $v['id'], $data);
        }
    }

结果

在这里插入图片描述

对文章进行检索
//Article控制器代码
public function search()
    {
        $data = $this->input->post();
        if (!empty($data['keyword'])){
            $body = [
                'query' => [
                    'bool' => [
                        //这里的should相当于or操作，还有must相当于and操作
                        'should' => [
                            ['match' => ['title' => $data['keyword'] ] ],
                            ['match' => ['desc' => $data['keyword'] ] ],
                            ['match' => ['content' => $data['keyword'] ] ],
                            ['match' => ['nickname' => $data['keyword'] ] ],
                        ]
                    ]
                ]
            ];
            $res = $this->es->searchDoc('articles', $body);
            success($res);
        }
    }

结果：

在这里插入图片描述
这里对es类进行了简单的封装，以及简单的操作，后续还会对代码进行优化.

新增功能

新增封装了批量插入功能函数

 /**
     * 批量插入数据
     * @param string $indexName
     * @param $data  带上id
     * @param bool $isId 是否在内容中也保存id，默认不保存
     * @return array
     */
    public function CreateDocs($indexName = "", $data, $isId = false)
    {
        $params = ["body" => []];
        foreach ($data as $k => $v) {
            if (empty($v['id'])) {
                //数组中不存在id
                $params['body'][] = [
                    'index' => [
                        '_index' => $indexName,
                    ]
                ];
            } else {
                //数组中存在id
                $params['body'][] = [
                    'index' => [
                        '_index' => $indexName,
                        //设置id
                        '_id' => $v['id']
                    ]
                ];
                //内容中不展示id字段
                if (!$isId) {
                    unset($v['id']);
                }
            }
            //内容
            $params['body'][] = $v;
        }
        try {
            $response = $this->client->bulk($params);
            $res = [
                'code' => 200,
                'message' => "success",
                'data' => $response
            ];
        } catch (Missing404Exception $exception) {
            $res = [
                'code' => $exception->getCode(),
                'message' => json_decode($exception->getMessage(), true),
                'data' => [],
            ];
        }
        return $res;
    }

对查询出来的数据格式和分页做优化(放在公共助手函数中)

//测试查询 这里只测试页码分页效果
function findEs()
    {
        $data = $this->input->get();
        $page = $data['page'] ? $data['page'] : 1; //当前页数
        $pageSize = 2; //页码
        $from = ($page - 1) * $pageSize;
        $es = getEs();
        $body = [
            'query' => [
                'bool' => [
                    "should" => [
                        ["match" => ['title' => "Python"]],
                        ["match" => ['desc' => "Python"]],
                        ["match" => ['nickname' => "Python"]],
                    ]
                ]
            ],
            "from" => $from,
            "size" => $pageSize,
        ];
        $res = $es->searchDoc('articles', $body);
        $result = esFormat($res,$page,$pageSize);
        responseArray($result);
    }




/*
 * 格式化查询到的es结果
 */
if (!function_exists("esFormat")) {
    function esFormat($data,$page = 0,$pageSize)
    {
        if (empty($data['data']) || $data['code'] != 200) {
            return returnArr(400, '', '查找失败');
        }
        if (empty($data['data']['hits']['total'])) {
            return returnArr(400, '', '暂无数据');
        }
        $formatData = array_column($data['data']['hits']['hits'], "_source");
        $total = $data["data"]['hits']['total']['value'];
        $res = [
            "list" => $formatData,
        ];
        if ($page){
            $res["paginate"] = [
                'page' => $page, //页码
                "pageSize" => $pageSize, //一页展示个数
                "total" => $total //总数
            ];
        }

        return returnArr(200, $res, "查询成功");
    }
}

分页展示没有问题
在这里插入图片描述

wyqgg123
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
JAVA实现ElasticSearch的简单实例
07-29
在eclipse上，操作elasticsearch的简单程序
23个有用的Elasticsearch示例查询
大灰狼的小绵羊哥哥的博客
04-13 467
为了说明Elasticsearch中的不同查询类型，我们将使用以下字段搜索书籍文档的集合：标题，作者，摘要，发布日期和评论数。 但首先，让我们使用批量API创建一个新索引并索引一些文档： PUT /bookdb_index { "settings": { "number_of_shards": 1 }} POST /bookdb_index/book/_bulk { "index": { "_id": 1 }} { "title": "Elasticsearch: The
Elasticsearch简介和使用实例
qq_37133859的博客
08-23 1268
什么是Elasticsearch Elasticsearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java语言开发的，并作为Apache许可条款下的开放源码发布，是一种流行的企业级搜索引擎。Elasticsearch用于云计算中，能够达到实时搜索，稳定，可靠，快速，安装使用方便，它的目标是使全文检索变得更简单。 安装Elasticsearch 用docker进行安装Elasticsearch d
Elasticsearch分布式全文搜索引擎
weixin_45321681的博客
04-07 384
文章目录一、Elasticsearch 是什么？二、ES安装1、安装软件2、启动失败问题解决三、ES入门一、数据格式二、索引三、文档操作四、映射操作五、高级查询 一、Elasticsearch 是什么？ Elasticsearch是一个基于Lucene的搜索服务器，简称为ES。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java语言开发的，并作为Apache许可条款下的开放源码发布，是一种流行的企业级搜索引擎。 二、ES安装 Elasti
PHP中使用ElasticSearch讲解
m0_58494091的博客
07-02 610
通过composer安装 composer require 'elasticsearch/elasticsearch' 在代码中引入 require 'vendor/autoload.php'; use Elasticsearch\ClientBuilder; $client = ClientBuilder::create()->setHosts(['172.16.55.53'])->build(); 首先要新建一个index： index对应关系型数据（以下简称MySQL）里面的数据库
基于python操作ES实例详解
01-02
这篇文章主要介绍了基于python操作ES实例详解,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下 安装 pip install elasticsearch5 # 安装对应版本的模块 创建ES...
python处理elasticsearch实例
最新发布
07-25
要使用Python处理Elasticsearch实例，可以使用elasticsearch库来与Elasticsearch进行交互。以下是一个简单的描述： 导入相关库：首先需要导入必要的Python库，如elasticsearch（用于与Elasticsearch建立连接和执行...
elasticsearch java操作的api实例
09-29
包含所因的索引建立、删除、查看，批量创建索引；搜索Query、过滤器 、分组高亮显示；以及创建Mapping
KETTLE操作ES入门实例.ppt
08-20
KETTLE操作ElasticSearch ,Kettle是一款开源的ETL工具，纯java编写，可以在Window、Linux、Unix上运行，数据抽取高效稳定。
Elasticsearch学习（二十一）ElasticsearchClient 中的 builder 序列化 反序列化
码易的博客
05-09 1145
目录 前言 一、builder 二、序列化 1、示例 2、原理 三、反序列化 1、示例 2、原理 前言 在 Elasticsearch-java 依赖中，大量使用了 builder 模式：在类里会有一个 builder 静态内部类，创建对象时无法使用 new，也没有无参构造，只能使用 builder 来创建对象，序列化和反序列化也是通过 builder 来实现。本文通过 builder 来探究这些类序列化和反序列化的过程。
Elasticsearch：Elasticsearch SQL介绍及实例 （一）
Elastic 中国社区官方博客
04-22 6649
Elasticsearch是一个全文搜索引擎，具有您期望的所有优点，例如相关性评分，词干，同义词等。 而且，由于它是具有水平可扩展的分布式文档存储，因此它可以处理数十亿行数据，而不会费劲。针对Elasticsearch专业人员来说，大多数人喜欢使用DSL来进行搜索，但是对于一些不是那么专业的人员来说，他们更为熟悉的是SQL语句。如何让他们对Elasticsearch的数据进行查询是一个问题。借助E............
elasticsearch PHP安装、使用
明日又天涯
11-28 331
elasticsearch 安装好后，在浏览器插件访问： https://chrome.google.com/webstore/detail/elasticsearch-head/ffmkiejjmecolpfloofpjologoblkegm/ PHP项目使用elasticsearch包，客户端操作 第一步：composer.json里加入 { "require": { ...
搜索实现(scout/elasticsearch)
yyqqjw的博客
04-28 799
1、elasticsearch安装 前提条件:必须安装jdk 安装elasticsearch——composer require elasticsearch 2、scout安装 如果laravel版本是5.8则 1、composer reuqire laravel/scout ^6.0 2、在config/app.php配置文件中的providers数组加入——Laravel\Scout\Scou...
elasticsearch-php 使用详细教程
赵一舟的博客
01-31 2462
在 composer.json 文件中引入 elasticsearch-php：官方的"~6.0"会报错，改成7就可以注意PHP版本必须选择7.4版本以上，不然报以下错误超时错误要加入Packagist 镜像使用方法。
Elasticsearch 基础知识及其操作实例
m0_48379126的博客
12-13 1615
1、什么是Elasticsearch? Elasticsearch 是一个基于 Apache Lucene(TM) 的开源搜索引擎。无论在开源还是专有领域，Lucene 可以被认为是迄今为止最先进、性能最好的、功能最全的搜索引擎库。 主要特点： 分布式的实时文件存储，每个字段都被索引并可被搜索 分布式的实时分析搜索引擎–做不规则查询 可以扩展到上百台服务器，处理 PB 级结构化或非结构化数据 Elasticsearch 使用 Java 开发并使用 Lucene 作为其核心来实现所有索引和..
Elasticsearch：如何使用 Elasticsearch PHP 客户端创建简单的搜索引擎
Elastic 中国社区官方博客
08-20 2122
如果你正在寻找快速、强大的搜索功能，Elasticsearch 是合乎逻辑的选择。 这种可扩展的搜索引擎可以执行快速、高效的全文搜索和其他复杂查询。 你可以使用 PHP 创建一个简单的搜索引擎来演示 Elasticsearch 的功能。 在本教程中，我们将通过使用 Elasticsearch 构建一个简单的搜索引擎，向你展示如何使用 PHP 创建和索引文档。 在今天的练习中，我们将使用如下的配置： 安装 Elasticsearch 你需要按照文章 “如何在 Linux，MacOS 及 Windo
ElasticSearch通用工具类
zhangshengqiang168的博客
03-22 2075
1.pom文件 <dependency> <groupId>org.elasticsearch.client</groupId> <artifactId>elasticsearch-rest-high-level-client</artifactId> <version>7.1.1</version> </...
PHP Elasticsearch的基本使用方法
DuTianTian_csdn的博客
05-29 377
对于Elasticsearch与Elasticsearch-php的安装，网上有比较多的教程，这里不再累述。只是要注意Elasticsearch、Elasticsearch-php与php的版本。这里笔者使用的是Elasticsearch 5.6.8 windows版、php 5.6 、php onethink框架（以下简称ot）、Elasticsearch-php composer如下：（PHP Composer 视频教程） 1 2 3 4 5 .
spring boot集成 elasticsearch 实例
05-11
在需要使用 Elasticsearch 的地方，注入 `BookRepository`，然后就可以对 Elasticsearch 中的文档进行操作了： ```java @Autowired private BookRepository bookRepository; public void addBook(Book book) { ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值