golang使用es提供搜索

搜索突然挂了。一脸懵逼。因为这个搜索服务是我1年前搭建的。啥都忘记了。现在整理下,将来可以参考。说明下,我的服务器一台,用docker-swarm 跑的服务。

搭服务

es 服务

search:
    image: elasticsearch:7.6.2
    ports:
      - xxx:9200 
      - xxx:9300 
    volumes:
      - /path/prd/es/data:/usr/share/elasticsearch/data
      - /path/prd/es/plugins:/usr/share/elasticsearch/plugins
      - /path/prd/es/config/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml
    environment:
      path.data: '/usr/share/elasticsearch/data'
      discovery.type: 'single-node'
      ES_JAVA_OPTS: '-Xms2048m -Xmx4096m'

ps: 敏感信息用 path和xxx 替换了。

elastichd 在线query

为了方便查询和查看服务。
安装了eshd

  eshd:
    image: containerize/elastichd
    ports:
      - xxxx:9800

在这里插入图片描述

这样服务就正常了。
ps: 注意我链接的是search, 因为容器的名字 我取得是search( 不要照搬)

数据同步-monstache

我这里用的是mongodb数据库。

  mongo-es:
    image: registry.cn-beijing.aliyuncs.com/aixunpan/mongo-es
    volumes:
      - /path/prd/mongo-es/config.toml:/config/config.toml
    command: -f /config/config.toml

自动增量同步。也就是会监听mongo的

服务数据异常了:
sudo docker exec -ti 2a56dba70f78 /bin/monstache -f /config/config.toml 重新同步下。2a56dba70f78是容器id.

镜像搭建

   git clone git@github.com:rwynn/monstache.git
   docker pull rwynn/monstache-builder-cache-rel6:1.0.7
   cd monstache
   docker build -t mongo-es .

可以参考: https://blog.csdn.net/weixin_45753881/article/details/126019511

代码接入

我用的go-zero框架,但是mongo没用他的,当时我用的时候不好使。

import "gopkg.in/mgo.v2/bson"
...
func (l *SearchCompaniesLogic) SearchLikeNameOrEqID(req types.SearchReq) (*types.PageResult, error) {  
   //query := elastic.NewTermQuery("name", req.Keyword) // =  
   req.Keyword = strings.TrimSpace(req.Keyword)  
   var query elastic.Query  
   if len(req.Keyword) > 0 {  
      if bson.IsObjectIdHex(req.Keyword) {  
         query = elastic.NewMatchQuery("_id", strings.ToLower(req.Keyword)) // like  
      } else {  
         query = elastic.NewFuzzyQuery("name", strings.ToLower(req.Keyword)) // like  
      }  
   } else {  
      query = elastic.NewMatchQuery("flag", 1)  
   }  
   result, err := l.svcCtx.Client.Search().Index("overseas.companies").Query(query).From(req.Offset).Size(req.Limit).Pretty(true).Do(l.ctx)  
   if err != nil {  
      return &types.PageResult{}, err  
   }  
   resp := types.PageResult{}  
   resp.Total = int(result.Hits.TotalHits.Value)  
   items := []models.Company{}  
   if resp.Total > 0 {  
      for _, hit := range result.Hits.Hits {  
         var com models.Company  
         err := json.Unmarshal(hit.Source, &com)  
         if err == nil {  
            com.ID = bson.ObjectIdHex(hit.Id)  
            com.Fill(l.svcCtx.Config.UploadConfig)  
            items = append(items, com)  
         }  
      }  
   }  
   resp.Size = req.Limit  
   resp.Page = req.Offset/req.Limit + 1  
   for _, item := range items {  
      resp.Items = append(resp.Items, item)  
   }  
   return &resp, nil  
}

总结

框架用的go-zero
搜索服务用的elasticsearch
mongo 链接库用的gopkg.in/mgo.v2/bson
数据同步用的monstache
es面板用的elastichd

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Elasticsearch是一个开源的分布式搜索和分析引擎,它提供了强大的全文搜索、结构化查询、分析能力和实时数据分析等功能。而Golang是一种编程语言,也被称为Go语言,它具有高效、简洁、并发安全等特点。 在Golang使用Elasticsearch可以通过第三方库进行操作,最常用的是官方提供Elasticsearch客户端库——"github.com/elastic/go-elasticsearch"。这个库提供了与Elasticsearch进行交互的API,可以进行索引、搜索、聚合等操作。 使用go-elasticsearch库,你可以通过以下步骤来使用Elasticsearch: 1. 安装go-elasticsearch库:在终端中执行命令`go get github.com/elastic/go-elasticsearch/v8`来安装该库。 2. 导入库:在你的Go代码中导入"go.elastic.co/elasticsearch/v8"。 3. 创建Elasticsearch客户端:使用提供的`elasticsearch.NewClient()`函数创建一个Elasticsearch客户端实例。 4. 执行操作:通过客户端实例调用相应的API方法来执行索引、搜索、聚合等操作。 以下是一个简单的示例代码,展示了如何使用go-elasticsearch库进行基本的索引和搜索操作: ```go package main import ( "context" "fmt" "log" "github.com/elastic/go-elasticsearch/v8" ) func main() { // 创建Elasticsearch客户端 cfg := elasticsearch.Config{ Addresses: []string{"http://localhost:9200"}, } es, err := elasticsearch.NewClient(cfg) if err != nil { log.Fatalf("Error creating the client: %s", err) } // 索引文档 doc := `{"title" : "Elasticsearch Golang Example"}` res, err := es.Index("my-index", strings.NewReader(doc)) if err != nil { log.Fatalf("Error indexing document: %s", err) } defer res.Body.Close() // 搜索文档 var buf bytes.Buffer query := map[string]interface{}{ "query": map[string]interface{}{ "match": map[string]interface{}{ "title": "example", }, }, } if err := json.NewEncoder(&buf).Encode(query); err != nil { log.Fatalf("Error encoding query: %s", err) } res, err = es.Search( es.Search.WithContext(context.Background()), es.Search.WithIndex("my-index"), es.Search.WithBody(&buf), es.Search.WithTrackTotalHits(true), es.Search.WithPretty(), ) if err != nil { log.Fatalf("Error searching for documents: %s", err) } defer res.Body.Close() // 处理搜索结果 var r map[string]interface{} if err := json.NewDecoder(res.Body).Decode(&r); err != nil { log.Fatalf("Error parsing the response body: %s", err) } fmt.Println(r) } ``` 这只是一个简单的示例,你可以根据自己的需求进行更复杂的操作。你可以参考go-elasticsearch库的文档(https://pkg.go.dev/github.com/elastic/go-elasticsearch/v8)来了解更多关于使用ElasticsearchGolang的信息。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值