1信息检索-布尔检索-倒排索引

提示:
信息检索 布尔检索 倒排索引 布尔查询


信息检索

  信息检索是从大规模非结构化数据(一般为文本)集合找出满足用户信息所需要的资料。
  非结构化数据指没有清晰和明显语义结构的数据,计算机不易处理。
  结构化数据典例:关系数据库

举个例子(词项-文档关联矩阵一个题目)

  非线性扫描:一种方式是给文档建立索引
  词项-文档关联矩阵
词项-文档关联矩阵
每列代表一个剧本,每行代表一个词项。当对应词项出现在剧本中时在表格中写1,没有就是0.
问题
对于词项-文档关联矩阵,给出一个上图问题:
解:取出词汇对应行,并对Calpurnia对应行求反,即
  110100 AND 110111 AND 101111 = 100100
  1对应位置的文档即为所求:第一个和第四个文档
在这里插入图片描述
布尔检索模型接受布尔表达式查询
  即AND 、 OR 、 NOT逻辑运算符组成的查询

相关术语及概念

在这里插入图片描述
在这里插入图片描述

倒排索引

从词项反向映射到文档

倒排索引示例

在这里插入图片描述

倒排索引构建

文档转化为归一化词条(小写,去标点等)->单个词汇列举->词条首字母排序->合并相同词条,建立索引
词条归一化
在这里插入图片描述

布尔查询处理(案例)

问题
步骤

两个倒排记录表的合并算法

合并算法

查询优化

查询优化:通过组织查询处理过程使处理工作量减少。
布尔查询优化主要因素:倒排记录表的访问顺序
方案:按照文档频率(倒排记录表长度)从小到大处理。

基本布尔操作的拓展和有序检索模型

在这里插入图片描述

  • 1
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

心灵排骨汤

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值