java倒排索引And查询_倒排索引

最新推荐文章于 2021-07-12 18:00:03 发布

weixin_39969060

最新推荐文章于 2021-07-12 18:00:03 发布

阅读量79

点赞数

文章标签： java倒排索引And查询

版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文链接：https://blog.csdn.net/weixin_39969060/article/details/114619592

版权

本文通过两个案例详细介绍了如何使用Java构建倒排索引，并进行And查询。案例一展示了从原始数据到倒排索引的转换过程，案例二则解释了在数据预处理阶段的处理方式。通过MapReduce实现，最后展示了查询结果。

摘要由CSDN通过智能技术生成

[TOC]

# 案例一

## 分析

![](https://box.kancloud.cn/61a737071bb83480f0f1dfb51a8c0c87_264x389.png)

## 准备数据

~~~

hello--a.txt 1

hello--b.txt 2

hello--c.txt 1

allen--b.txt 2

jerry--a.txt 2

allen--a.txt 1

jerry--c.txt 2

~~~

## 代码

~~~

package com.index;

import com.folwsum.FlowSumSort;

import org.apache.hadoop.conf.Configuration;

import org.apache.hadoop.fs.FileSystem;

import org.apache.hadoop.fs.Path;

import org.apache.hadoop.io.LongWritable;

import org.apache.hadoop.io.Text;

import org.apache.hadoop.mapreduce.Job;

import org.apache.hadoop.mapreduce.Mapper;

import org.apache.hadoop.mapreduce.Reducer;

import org.apache.hadoop.mapreduce.lib.input.FileInputFormat;

import org.apache.hadoop.mapreduce.lib.input.TextInputFormat;

import org.apache.hadoop.mapreduce.lib.output.FileOutputFormat;

import org.apache.hadoop.mapreduce.lib.output.TextOutputFormat;

import java.io.IOException;

public class IndexStepTwo {

public static class IndexStepTwoMapper extends Mapper {

Text k = new Text();

Text v = new Text();

@Override

protected void map(LongWritable key, Text value, Co

最低0.47元/天解锁文章

weixin_39969060

关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
java倒排索引And查询_倒排索引

[TOC]# 案例一## 分析![](https://box.kancloud.cn/61a737071bb83480f0f1dfb51a8c0c87_264x389.png)## 准备数据~~~hello--a.txt 1hello--b.txt 2hello--c.txt 1allen--b.txt 2jerry--a.txt 2allen--a.txt 1jerry--c.txt 2~~~#...
复制链接

扫一扫

评论

被折叠的条评论为什么被折叠?

到【灌水乐园】发言

查看更多评论

添加红包

成就一亿技术人!

hope_wisdom

发出的红包

实付元

使用余额支付

点击重新获取

扫码支付

钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。