WEB项目搜索解决方案-Solr

最新推荐文章于 2022-06-23 14:06:05 发布

「已注销」

最新推荐文章于 2022-06-23 14:06:05 发布

阅读量962

点赞数

分类专栏： java 文章标签： solr java spring

本文链接：https://blog.csdn.net/JYplute/article/details/107771321

版权

EverydayOneCat

Cat记忆混乱…✍️🐈💦
🐈➡️🛏️💤🙏

2869749ea7e1bb8e02d71e4dc8b052bd5988700b.png@518w_1e_1c

Solr

1.什么是Solr

大多数搜索引擎应用都必须具有某种搜索功能，问题是搜索功能往往是巨大的资源消耗并且它们由于沉重的数据库加载而拖垮你的应用的性能。

Solr是一个开源搜索平台，用于构建搜索应用程序。它建立在Lucene(全文搜索引擎)之上。 Solr是企业级的，快速的和高度可扩展的。使用Solr构建的应用程序非常复杂，可提供高性能。

Solr可以和Hadoop一起使用。由于Hadoop处理大量数据，Solr帮助我们从这么大的源中找到所需的信息。不仅限于搜索，Solr也可以用于存储目的。像其他NoSQL数据库一样，它是一种非关系数据存储和处理技术。

总之，Solr是一个可扩展的，可部署，搜索/存储引擎，优化搜索大量以文本为中心的数据。

2.Solr本地安装

Solr安装之前专门写过一篇文章介绍。《Linux下Solr的安装及配置》这里其实差不多，主要介绍几个关键点。

2.1中文分析器IK Analyzer

IK Analyzer 是一个开源的，基亍 java 语言开发的轻量级的中文分词工具包。从 2006年 12 月推出 1.0 版开始， IKAnalyzer 已经推出了 4 个大版本。最初，它是以开源项目Luence 为应用主体的，结合词典分词和文法分析算法的中文分词组件。从 3.0 版本开始，IK 发展为面向 Java 的公用分词组件，独立亍 Lucene 项目，同时提供了对 Lucene 的默认优化实现。在 2012 版本中，IK 实现了简单的分词歧义排除算法，标志着 IK 分词器从单纯的词典分词向模拟语义分词衍化。

3.配置域

域相当于数据库的表字段，用户存放数据，因此用户根据业务需要去定义相关的Field（域），一般来说，每一种对应着一种数据，用户对同一种数据进行相同的操作。

域的常用属性：

name：指定域的名称
type：指定域的类型
indexed：是否索引
stored：是否存储
required：是否必须
multiValued：是否多值

3.1普通域

修改solrhome的schema.xml 文件根据需求设置业务系统 Field

<field name="item_goodsid" type="long" indexed="true" stored="true"/>
<field name="item_title" type="text_ik" indexed="true" stored="true"/>
<field name="item_price" type="double" indexed="true" stored="true"/>
<field name="item_image" type="string" indexed="false" stored="true" />
<field name="item_category" type="string" indexed="true" stored="true" />
<field name="item_seller" type="text_ik" indexed="true" stored="true" />
<field name="item_brand" type="string" indexed="true" stored="true" />

3.2复制域

复制域的作用在于将某一个Field中的数据复制到另一个域中，常用来把需要搜索的关键域结合起来形成一个新的域好搜索，但是不要存起来。

<field name="item_keywords" type="text_ik" indexed="true" stored="false" multiValued="true"/>
<copyField source="item_title" dest="item_keywords"/>
<copyField source="item_category" dest="item_keywords"/>
<copyField source="item_seller" dest="item_keywords"/>
<copyField source="item_brand" dest="item_keywords"/>

3.2动态域

当我们需要动态扩充字段时，我们需要使用动态域。对于品优购，规格的值是不确定的，所以我们需要使用动态域来实现。需要实现的效果如下：

<dynamicField name="item_spec_*" type="string" indexed="true" stored="true" />

4.Spring Data Solr入门

在前面的淘淘商城我们学习了SolrJ的实际使用，这里介绍Spring Data Solr，Spring Data Solr就是为了方便Solr的开发所研制的一个框架，其底层是对SolrJ（官方API）的封装。

4.1配置文件

pom.xml中引入依赖

<dependency>
    <groupId>org.springframework.data</groupId>
    <artifactId>spring-data-solr</artifactId>
    <version>1.5.5.RELEASE</version>
</dependency>

resources下创建 applicationContext-solr.xml

<?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans"
	xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:p="http://www.springframework.org/schema/p"
	xmlns:context="http://www.springframework.org/schema/context"
	xmlns:solr="http://www.springframework.org/schema/data/solr"
	xsi:schemaLocation="http://www.springframework.org/schema/data/solr 
  		http://www.springframework.org/schema/data/solr/spring-solr-1.0.xsd
		http://www.springframework.org/schema/beans 
		http://www.springframework.org/schema/beans/spring-beans.xsd
		http://www.springframework.org/schema/context 
		http://www.springframework.org/schema/context/spring-context.xsd">
	<!-- solr服务器地址 -->
	<solr:solr-server id="solrServer" url="http://127.0.0.1:8080/solr" />
	<!-- solr模板，使用solr模板可对索引库进行CRUD的操作 -->
	<bean id="solrTemplate" class="org.springframework.data.solr.core.SolrTemplate">
		<constructor-arg ref="solrServer" />
	</bean>
</beans>

4.2@Field 注解

将品优购的TbItem实体类拷入工程 ,属性使用@Field注解标识。如果属性与配置文件定义的域名称不一致，需要在注解中指定域名称。

public class TbItem implements Serializable{
   

	@Field
    private Long id;

	@Field("item_title")
    private String title;
	    
    @Field("item_price")
private BigDecimal price;

    @Field("item_image")
    private String image;

    @Field("item_goodsid")
    private Long goodsId;

    @Field("item_category")
    private String category;

    @Field("item_brand")
    private String brand;

    @Field("item_seller")
private String seller;
.......
}

4.3增加（修改）

@RunWith(SpringJUnit4ClassRunner.class)
@ContextConfiguration(locations="classpath:applicationContext-solr.xml")
public class TestTemplate {
   

	@Autowired
	private SolrTemplate solrTemplate;
	
	@Test
	public void testAdd(){
   
		TbItem item=new TbItem();
		item.setId(1L);
		item.setBrand("华为");
		item.setCategory("手机");
		item.setGoodsId(1L);
		item.setSeller("华为2号专卖店");
		item.setTitle("华为Mate9");
		item.setPrice(new BigDecimal(2000));		
		solrTemplate.saveBean(item);
		solrTemplate.commit();
	}
}

4.4按主键查询

@Test
public void testFindOne(){
   
    TbItem item = solrTemplate.getById(1, TbItem.class);
    System.out.println(item.getTitle());
}

4.5按主键删除

@Test
public void testDelete(){
   
    solrTemplate.deleteById("1");
    solrTemplate.commit();
}

4.6分页查询

首先循环插入100条测试数据，增加可以用saveBeans()方法加入集合

@Test
public void testAddList(){
   
    List<TbItem> list=new ArrayList();

    for(int i=0;i<100;i++){
   
        TbItem item=new TbItem();
        item.setId(i+1L);
        item.setBrand("华为");
        item.setCategory("手机");
        item.setGoodsId(1L);
        item.setSeller("华为2号专卖店");
        item.setTitle("华为Mate"+i);
        item.setPrice(new BigDecimal(2000+i));	
        list.add(item);
    }

    solrTemplate.saveBeans(list);
    solrTemplate.commit();
}

编写分页查询测试代码：

@Test
public void testPageQuery(){
   
    Query query=new SimpleQuery("*:*");
    query.setOffset(20);//开始索引（默认0）
    query.setRows(20);//每页记录数(默认10)
    ScoredPage<TbItem> page = solrTemplate.queryForPage(query, TbItem.class);
    System.out.println("总记录数："+page.getTotalElements());
    List<TbItem> list = page.getContent();
    showList(list);
}	
//显示记录数据
private void showList(List<TbItem> list){
   		
    for(TbItem item:list){
   
        System.out.println(item.getTitle() +item.getPrice());
    }		
}

4.7条件查询

Criteria 用于对条件的封装：

Query query=new SimpleQuery("*:*");
Criteria criteria=new Criteria("item_title").contains("2");
criteria=criteria.and("item_title").contains("5");//每次都要等于自身，这点和MYbatis不一样		
query.addCriteria(criteria);

4.8删除全部数据

@Test
    public void testDeleteAll(){
   
    Query query=new SimpleQuery("*:*");
    solrTemplate.delete(query);
    solrTemplate.commit();
}

品优购

1.批量数据导入

编写专门的导入程序，将商品数据导入到Solr系统中

1.1搭建工程

创建pinyougou-solr-util（jar） ,引入pinyougou-dao 以及spring 相关依赖：

<context:component-scan base-package="com.pinyougou.solrutil">
</context:component-scan>

1.2实体类

上文解释过，需要修改pinyougou-pojo中的TbItem类添加必要的@Field注解

同时，为了让规格导入动态域，我们定义Map属性，具体代码如下：

@Field
private Long id;

@Field("item_title")
private String title;

private String sellPoint;

@Field("item_price")
private BigDecimal price;

private Integer stockCount;

private Integer num;

private String barcode;

@Field("item_image")
private String image;

private Long categoryid;

private String status;

private Date createTime;

private Date updateTime;

private String itemSn;

private BigDecimal costPirce;

private BigDecimal marketPrice;

private String isDefault;

@Field("item_goodsid")
private Long goodsId;

private String sellerId;

private String cartThumbnail;

@Field("item_category")
private String category;

@Field("item_brand")
private String brand;

private String spec;

@Field("item_seller")
private String seller;

@Dynamic
@Field("item_spec_*")
private Map<String,String> specMap;

1.3数据导入Solr索引库

创建com.pinyougou.solrutil包，创建类SolrUtil ,实现商品数据的查询(已审核商品)

@Component
public class SolrUtil {
   

	@Autowired
	private TbItemMapper itemMapper;
	@Autowired
	private SolrTemplate solrTemplate;

	
	/**
	 * 导入商品数据
	 */
	public void importItemData() {
   
		TbItemExample example = new TbItemExample();
		Criteria criteria = example.createCriteria();
		criteria.

最低0.47元/天解锁文章

「已注销」

关注

0
点赞
踩
1

收藏

觉得还不错? 一键收藏
0
评论
WEB项目搜索解决方案-Solr

EverydayOneCatCat记忆混乱…✍️????????????➡️????️????????Solr1.什么是Solr大多数搜索引擎应用都必须具有某种搜索功能，问题是搜索功能往往是巨大的资源消耗并且它们由于沉重的数据库加载而拖垮你的应用的性能。Solr是一个开源搜索平台，用于构建搜索应用程序。它建立在Lucene(全文搜索引擎)之上。 Solr是企业级的，快速的和高度可扩展的。使用Solr构建的应用程序非常复杂，可提供高性能。Solr可以和Hadoop一起使用。由于Hadoo
复制链接

扫一扫