Yii ElasticSearch实战以及优化点

最新推荐文章于 2024-08-15 10:09:55 发布
置顶 最新推荐文章于 2024-08-15 10:09:55 发布
阅读量737 收藏 4
点赞数
分类专栏： Yii-es使用 文章标签： Yii-es
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43946245/article/details/105435643
版权

前面分享了Xunserch 和 ElasticSearch的安装，本来是要用Xunserch 的因为官网项目部需要太强大的插件，但是安装不给力，各种错误，最后用ElasticSearch。。。其实ElasticSearch并不太难，，， 不说了 直接上代码

先说下我的设计模式：

后台添加数据的同时王es里面插入索引， es6.0版本后一个索引只能插入一个type，所以es每个索引对应数据表， es存放前端要显示的字段即可，没必要全部字段都存在里面。 插入或者更新是调用一个公共方法。。。 搜索调用搜索接口

优化点 如果你的集群只有一个节点，这不要设置副本数，不然健康值会变成yellow，设置为0即可
在这里插入图片描述

阿里云的dts可以自动把mysql数据库的数据添加和更新索引到ES 但是需要付费。。。这个不做过多的说明

1.在 项目配置文件 web.php (高级模板main.php) 中的components中添加配置：

		//现使用 es
        'elasticsearch' => [
            'class' => 'yii\elasticsearch\Connection',
            //默认为true   如果单节点  设为false 不然会连接错误
            'autodetectCluster' => false,
            'nodes' => [
                ['http_address' => '127.0.0.1:9200'],
            ],
        ],

2.搜索接口

/**
     *  auth - rk
     *  获取全站搜索数据
     *  支持分词搜索和 多条件+多字段搜索
     */
 public function actionSearch(){

        if(Yii::$app->request->isPost){
            $searchData = Yii::$app->request->post('name','');
            $pageSize = Yii::$app->request->post('pageSize',5);
            $page = Yii::$app->request->post('page',1);
            $cate = Yii::$app->request->post('cate','');
            $offset = ($page-1)*$pageSize;
            $searchData =trim($searchData);
//            $searchData = str_replace(" ","",$searchData);
            if(empty($searchData)){
                $data['res_code']='200';
                $data['res_msg']='success';
                $data['res_data']=[];
                return $data;
            }
            //ElasticSearch
            $es = new ElasticSearch();
            //高亮数据
            $highlight = [
             #左标签，配合前端.highlight这个类来实现高亮
            "pre_tags"=>['<span class="highlight">'],
            "post_tags"=>['</span>'],
            #在原生api中写的是{}表示空对象，因此使用php的stdClass来表示空对象
            "fields"=>[
                "title"=>new \stdClass(),
                "subtitle"=>new \stdClass(),
                 ]
            ];

            $cat = ['product','cases','news','about_us'];
            if(!empty($cate)){
                if(in_array($cate,$cat)){
                    $cat = [$cate];
                }
            }
            $resArr = [];
            foreach ($cat as $val){
                $es::$index_db_name = $val;
                $es::$type_tb_name = $val;
                $where = ["is_delete"=>0,"status"=>1];
                if($val == 'about_us'){
                    $where = ["is_delete"=>0];
                }
                $must[] = [
                    "multi_match" => [//分词多字段搜索
                        'query' => $searchData,//['fuzzy'=>$searchData]
                        'fields' => ['title','subtitle'],//搜索的字段
                    ],
                ];

                $query = [
                    'bool'=>[
                        'must' => $must,
                        'should' => [
                            ['match'=> ['is_delete' => 0]]
                        ],
                        'minimum_should_match' => 1,
                    ]
                ];

                $sort = ['sort' => ['order' => 'desc']];
                //->query($query)->orderBy($sort)->asArray()->all()   'terms'=> $where

                $esQuery = $es::find()->query($query);//->offset($offset)->limit($pageSize)->orderBy($sort)->highlight($highlight)->asArray()->all()
                $count = $es::find()->query($query)->search();
                $res = $esQuery->offset($offset)->limit($pageSize)->orderBy($sort)->highlight($highlight)->asArray()->all();
                $resArr[$val]['count'] = $count['hits']['total']['value'] ??0;
                $resArr[$val]['pageSize'] = $pageSize;
                $resArr[$val]['data'] = $res??[];
            }
            //搜索数据存储到后台
            $searchModel  = new Search();
            //先判断是否存在搜索数据  存在更新次数
            $querySql = $searchModel::find()->where(['like','content',$searchData]);
            $count = $querySql->count();
            if($count !==0){
                $queryData = $querySql->asArray()->all();
                foreach ($queryData as $key => &$val){
                    $num = $val['num'] +=1;
                    $searchModel->updateAll(['num'=>$num],['id'=>$val['id']]);
                }
            }else{
                $searchModel->ip = Yii::$app->request->getUserIP();
                $searchModel->content  = $searchData;
                $searchModel->save();
            }

             //xunsearch
//            $db = \Yii::$app->xunsearch->getDatabase('mmc_uav',true);
//            $xs = $db->xs;
//            $search = $db->getSearch();
//            $index = $db->getIndex();
//            var_dump($search);die;
            $data['res_code']='200';
            $data['res_msg']='success';
            $data['host'] = Yii::$app->request->hostInfo;
            $data['res_data']=$resArr;
            return $data;
        }
        $data['res_code']='400';
        $data['res_msg']='请求方式错误';
        return $data;
    }

3.ElasticSearch模型

<?php
/**
 * Created by PhpStorm.
 * User: renkun
 * Date: 2020/4/9
 * Time: 10:09
 */

namespace app\models;


use yii\elasticsearch\ActiveRecord;

class ElasticSearch  extends ActiveRecord
{

    public static $index_db_name = '';
    public static $type_tb_name = '';
//    # 定义db链接
    public static function getDb()
    {
        return \Yii::$app->get('elasticsearch');
    }

    // 索引名相当于库名
    public static function index(){
        return self::$index_db_name;
    }

    // 类别名相当于表名
     public static function type(){
        return self::$type_tb_name;
     }

    # 属性
    public function attributes()
    {
        $mapConfig = self::mapConfig();
        return array_keys($mapConfig[self::$type_tb_name]);
    }
    # mapping配置
    public static function mapConfig(){
        return [
            'news' => [
                'id'  => ['type' => 'int'],
                'userId'  => ['type' => 'int'],
                'categoryId'  => ['type' => 'int'],
                'title'  => ['type' => 'string'],//默认分词
                'subtitle'  => ['type' => 'string'],
                'content'      => ['type' => 'string'],
                'recommend'  => ['type' => 'int'],
                'publishTime'  => ['type' => 'int'],
                'auth'  => ['type' => 'string'],
                'cover_img'  => ['type' => 'string'],
                'origin'  => ['type' => 'string'],
                'origin_url'  => ['type' => 'string'],
                'status'  => ['type' => 'int'],
                'sort'  => ['type' => 'int'],
                'is_delete'  => ['type' => 'int'],
            ],
            'about_us' => [
                'id'  => ['type' => 'int'],
                'content'      => ['type' => 'string'],
                'addtime'  => ['type' => 'int'],
                'title'  => ['type' => 'string'],//默认分词
                'description'  => ['type' => 'string'],
                'type'  => ['type' => 'int'],
                'sort'  => ['type' => 'int'],
                'is_delete'  => ['type' => 'int'],
            ],
            'cases' => [
                'id'  => ['type' => 'int'],
                'userId'  => ['type' => 'int'],
                'categoryId'  => ['type' => 'int'],
                'title'  => ['type' => 'string'],//默认分词
                'subtitle'  => ['type' => 'string'],
                'auth'  => ['type' => 'string'],
                'device'  => ['type' => 'string'],
                'content'      => ['type' => 'string'],
                'recommend'  => ['type' => 'int'],
                'status'  => ['type' => 'int'],
                'cover_img'  => ['type' => 'string'],
                'create_at'  => ['type' => 'int'],
                'sort'  => ['type' => 'int'],
                'is_delete'  => ['type' => 'int'],
            ],
            'product' => [
                'id' => ['type' => 'int'],
                'product_type_id'  => ['type' => 'int'],
                'title'  => ['type' => 'string'],//默认分词
                'description'  => ['type' => 'string'],
                'cover_img_url'  => ['type' => 'string'],
                'product_introduction'  => ['type' => 'string'],
                'extension'  => ['type' => 'string'],
                'images'  => ['type' => 'long'],
                'recommend'  => ['type' => 'string'],
                'addtime'  => ['type' => 'int'],
                'is_recommend'  => ['type' => 'int'],
                'user_id'      => ['type' => 'int'],
                'status'  => ['type' => 'int'],
                'sort'  => ['type' => 'int'],
                'is_delete'  => ['type' => 'int'],
            ]
        ];
    }

     // 映射
     public static function mapping(){
        $mapConfig = self::mapConfig();
        return [
            static::type() => $mapConfig[self::$type_tb_name]
        ];
    }
    // 更新映射
     public static function updateMapping(){
         $db = self::getDb();
         $command = $db->createCommand();
         if(!$command->indexExists(self::index())){
             $command->createIndex(self::index());
         }
         $res = $command->setMapping(self::index(), self::type(), self::mapping());
        return $res;
     }
     // 创建索引
     public static function createIndex(){
         $db = static::getDb();
         $command = $db->createCommand();
         if(!$command->indexExists(self::index())){
             $command->createIndex(static::index(), [
                 'settings' => [
                     'index' => [
                         // 指定新索引的时候不会立即生效，1s之后刷新生效  默认是1s
                         'refresh_interval'      => '1s',
                         // 索引分片个数  默认5片
                         'number_of_shards'      => 5,
                         // 每个分片副本个数  默认1个       单节点集群如果副本不设置为0   集群健康值会变成黄色  因为单点集群无法存放副本
                         'number_of_replicas'    => 0,
                     ]
                 ],
//             'mappings' => static::mapping(),
                 //'warmers' => [ /* ... */ ],
                 //'aliases' => [ /* ... */ ],
                 //'creation_date' => '...'
             ]);
         }
     }

    // 删除索引   (谨慎使用)
     public static function deleteIndex(){
         $db = static::getDb();
         $command = $db->createCommand();
         $res = $command->deleteIndex(static::index(), static::type());
         return $res;
     }


    //创建es索引 并赋值
    public static function es($index,$data=[],$action = 0){   //0 添加  1 创建
        $es = new self();
        $es::$index_db_name = $index;
        $es::$type_tb_name = $index;
        $attr = $es::mapping();

        $indexKey = array_keys($attr[$index]);
//        var_dump($data);die;
        $tmpData = $data;
        //只获取主要字段
        if(!empty($data)){
            if($action == 1){
                $es = $es::findOne($data['id']); //更新
                if(empty($es)){
                    self::es($index,$tmpData,0);
                }
            }else{
                $es::createIndex();
                $es->primaryKey = $data['id'];
            }
            foreach ($data as $key => $val){
//                var_dump($indexKey);
//                var_dump($data);die;
                if(in_array($key,$indexKey)){
                    $es->$key = $val;
                }
            }
            if ($es->save() == false) {
                die("es数据出现错误，请联系管理员");
            }

        }
    }

}
  1. 手动添加索引和更新
		 if( $model->save()){
	              //同步到es
	              ElasticSearch::es('product',$model->attributes);
	              return $this->redirect(['view', 'id' => $model->id]);
	      }

//最终效果
在这里插入图片描述
在这里插入图片描述

yii2-elasticsearch:Yii 2 Elasticsearch 扩展
08-04
Yii 2 的 Elasticsearch 查询和 ActiveRecord 这个扩展为提供了集成。 它包括基本的查询/搜索支持，还实现了ActiveRecord模式，允许您在 Elasticsearch 中存储活动记录。 有关许可证信息，请检查文件。 文档位于 。...
yii-elasticseach查询优化（terms）
qq_39303936的博客
03-22 253
terms 的用法就相当于 in ，默认情况下请求体允许个数为1024。
探索 Yii2-Elasticsearch：高效数据检索的利器
gitblog_00084的博客
04-19 339
探索 Yii2-Elasticsearch：高效数据检索的利器 yii2-elasticsearchYii 2 Elasticsearch extension项目地址:https://gitcode.com/gh_mirrors/yi/yii2-elasticsearch 是一个由 Yiisoft 开发的 PHP 框架，用于与 Elasticsearch 数据库进行无缝集成。Elasticsea...
Yii 2 Elasticsearch 扩展使用教程
最新发布
gitblog_00122的博客
08-15 287
Yii 2 Elasticsearch 扩展使用教程 yii2-elasticsearchYii 2 Elasticsearch extension项目地址:https://gitcode.com/gh_mirrors/yi/yii2-elasticsearch 1. 项目的目录结构及介绍 Yii 2 Elasticsearch 扩展的目录结构如下： yiisoft/yii2-elasticse...
安装配置elasticsearch、安装elasticsearch-analysis-ik插件、mysql导入数据到elasticsearch、安装yii2-elasticsearch及使用...
weixin_30697239的博客
09-20 296
一、安装elasticsearch 获取elasticsearch的rpm：wgethttps://download.elastic.co/elasticsearch/release/org/elasticsearch/distribution/rpm/elasticsearch/2.4.1/elasticsearch-2.4.1.rpm 具体版本在es官网获取：https://www.el...
elastica php yii,Yii 1.1.*集成elasticsearch php 客户端Elastica
weixin_39548490的博客
03-22 131
Yii是一个基于组件、用于开发大型 Web 应用的高性能 PHP 框架。Yii提供了今日Web 2.0应用开发所需要的几乎一切功能。Yii是最有效率的PHP框架之一。官方网站ElasticSearch 是一个基于Lucene构建的开源，分布式，RESTful搜索引擎。设计用于云计算中，能够达到实时搜索，稳定，可靠，快速，安装使用方便。支持通过HTTP使用JSON进行数据索引。Elastica...
Yii 2.0进阶版 高级组件 优化京东平台
04-25
2. **组件化编程**：学习如何在 Yii 2.0 中创建和使用组件，以及如何扩展内置组件以满足特定需求。 3. **数据库设计与 ORM**：掌握 Active Record 模式，理解如何定义数据模型，进行数据库操作。 4. **性能优化**：...
Yii2 中实现单点登录的方法
10-18
主要介绍了Yii2 中实现单点登录的方法，小编觉得挺不错的，现在分享给大家，也给大家做个参考。一起跟随小编过来看看吧
Yii框架实战视频教程
07-22
教程名称：Yii框架实战视频教程（更新中）       课程目录： 【】0507-01-yii简介 【】0507-02-yii项目部署 【】0507-03-yii框架整合用户登录模板 【】0507-04-yii路由获得控制...
PHPYII框架实战项目实例视频教程
07-22
资源名称：PHP YII框架实战项目实例视频教程 教程内容：  资源太大，传百度网盘了，链接在附件中，有需要的同学自取。
yii2-elasticsearch, Yii 2 Elasticsearch扩展.zip
09-18
yii2-elasticsearch, Yii 2 Elasticsearch扩展 Elasticsearch查询和 Yii 2的ActiveRecord这个扩展为 Yii框架 2.0提供了的集成。 它包括基本查询/搜索支持，还实现了 ActiveRecord Pattern，允许你在elasticsearch
Yii2集成Elasticsearch（一）
wx145的博客
10-24 3460
背景知识： 全文搜索可以简单地分为两类，一种是顺序扫描，即我们常见的使用 like %keyword% 方式，扫描整张数据表，在每一条记录中查找；另一种就是索引扫描。elasticsearch就是后者。 索引扫描分为两部分：创建索引和搜索索引。创建索引的主要步骤是：对原数据进行分词处理（去掉标点和一些无意义的词等等），将得到的词元交给语言处理组件（例如将复数变为单数，将过去式变为一般式等等），...
Yii2-elasticsearch的简单使用
weixin_45000482的博客
12-30 1775
Yii2-elasticsearch的简单使用
Yii2+ElasticSearch增删改查实现
xiadiganhuo的博客
04-27 715
构建该model之前需要自行配置yii2-elasticsearch组件安装 我是通过composer安装的 在composer.json中 安装完成之后 然后需要在yii的配置文件中加入小组件相关配置 接下来就是构建业务模型 集成的ActiveRecord类应该为组件目录下的AR类 use yii\elasticsearch\ActiveRecord 这个AR了重写了yii2的AR类部分方法，有些查询需要原生es语句才可以。 Model: class HospitalEsModel extend
elasticsearch入门操作+高级操作(超详细)
Knight
07-16 3696
目录1.ElasticSearch相关概念2.索引库操作2.1.创建索引库2.2.查看索引库2.3.删除索引库3.类型及映射操作3.1.创建映射字段(**`需先创建索引库`**)3.2.映射属性详解3.3.查看映射关系3.4.一次创建索引库和类型（常用）4.文档操作4.1.新增并随机生成id4.2.查看文档4.3.新增文档并自定义id4.4.修改数据4.5.删除数据4.6.删除所有数据5.查询5.1.基本查询5.1.1 查询所有（match_all)5.1.2 匹配查询（match）5.1.3 多字段查询（
Yii的修行之路 - Active Record 活动记录
weixin_33824363的博客
06-04 204
简介 Yii 在操作数据库方面提供了一个十分强大的类库来支撑整个框架业务的运转，这就是 Active Record （活动记录，以下简称AR）。 基本概念 AR类提供了一个面向对象的接口， 用以访问数据库中的数据。 例如，假定 Customer AR 类关联着 customer 表，且该类的 name 属性代表 customer 表的 n...
yii2.0框架中使用elasticsearch
weixin_34396103的博客
06-21 386
自己写的公共类，如有不完善或错误地方，欢迎更正 common/Elasticseatch.php 1 <?php 2 3 namespace app\common; 4 5 use yii; 6 use yii\elasticsearch\ActiveRecord; 7 use yii\data\Pagination; 8 ...
Yii2 ElasticSearch
freedom_fd的博客
06-11 655
Yii2 ElasticSearch yii2 安装 ElasticSearch composer require --prefer-dist yiisoft/yii2-elasticsearch:"~2.0.0" 在main.php 中配置 'elasticsearch' => [ 'class' => 'yii\elasticsearch\Connection', ...
Yii2实战：RESTful API授权验证全面解析
"yii2项目实战之restful api授权验证详解" 在RESTful API设计中，授权验证是确保数据安全和用户隐私的关键环节。Yii2框架提供了强大的工具来处理API的授权验证，使得开发者能够轻松地构建安全的RESTful服务。在本文...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值