从零开始,写一个搜索引擎 (0x01)

本文介绍了搜索引擎的基本概念,包括文档、倒排索引、正排索引和索引器。搜索引擎设计分为数据层、字段层、段层、索引模块层、引擎层和网络层。着重强调了倒排索引作为核心,并预告了后续将深入讲解相关底层技术。代码已开源在GitHub上,邀请读者参与讨论和优化。
摘要由CSDN通过智能技术生成

第零部分我们已经列了一个提纲了,这一篇文章开始要详细说说了。

搜索引擎基本概念

在说搜索引擎架构分层之前,我们先确定几个搜索引擎的概念。

  • 文档,搜索引擎的基本数据单元,比如一张网页,一个商品,多个文档合在一起就是一个搜索引擎的完整数据
  • 倒排索引正排索引,存储在搜索引擎内部的数据结构,也是搜索引擎最底层的数据结构。
  • 索引器,将文档数据生成可供搜索的倒排索引正排索引的程序就是索引器。
  • 检索器,通过对倒排索引正排索引进行查找,从而查找到文档的程序。
  • 字段,每个文档可能有多个字段,比如一篇文章有标题,作者,摘要,详情,发布时间的,这些东西虽然在一个文档中,但是搜索的时候需要区别对待。
  • 索引,多个文档通过索引器生成了一堆倒排正排索引,我们把这些倒排正排索引的集合索引,如果后面提到索引就是指正排和倒排索引的集合,索引也可以理解为数据库中的表

好了,上面就是搜索引擎的最基本的概念,搜索引擎简单的说分成两部分,一部分就是

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值