Solr-Solrj-Spring-Data-Solr这一篇文章就完了

最新推荐文章于 2024-04-07 11:35:15 发布
最新推荐文章于 2024-04-07 11:35:15 发布
阅读量457 收藏 3
点赞数 1
分类专栏： Solr-Solrj-Spring-Data-Solr 文章标签： solr
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43060870/article/details/105375558
版权

Solr-Solrj-Spring-Data-Solr

什么是Solr

  • 直接使用sql搜索存在的问题：
    1. 大多数搜索引擎应用都必须具有某种搜索功能；
    2. 搜索功能往往是巨大的资源消耗；
    3. 它们由于沉重的数据库加载而拖垮你的应用的性能；
    4. 所有我们一般在做搜索的时候会把它单独转移到一个外部的搜索服务器当中进行；
    5. Apache Solr是一个流行的开源搜索服务器；
  • Apache Solr：
    1. Solr是一个开源搜索平台，用于构建搜索应用程序；
    2. 是一个独立的企业级搜索应用服务器，它对外提供类似于Web-service的API接口；
    3. 它建立在Lucene(全文搜索引擎)之上，Solr是企业级的，快速的和高度可扩展的；
    4. 用户可以通过http请求，向搜索引擎服务器提交一定格式的XML文件，生成索引；也可以通过Http Get操作提出查找请求，并得到XML格式的返回结果。
  • 为什么选择Solr？
    1. 第一点原因:来自SQL数据库在性能上缺乏亮点，基本上，你需要在你的查询中使用JOIN操作。
    2. 第二点原因：文档的天然数据特性松散的文本文件，这种查询都是需要使用LIKE，然而join和like都是性能杀手，在目前的数据库引擎中是不方便的；
    3. solr底层采用的是倒排索引，这种数据结构类似与美化过的词典。
  • Solr 关键特性
    1. 基于标准的开放接口：Solr搜索服务器支持通过XML、JSON和HTTP查询和获取结果。
    2. 易管理：Solr可以通过HTML页面管理，Solr配置通过XML完成。
    3. 可伸缩性：能够有效地复制到另外一个Solr搜索服务器。
    4. 灵活的插件体系：新功能能够以插件的形式方便的添加到Solr服务器上。
    5. 强大的数据导入功能：数据库和其他结构化数据源现在都可以导入、映射和转化。

Solr安装

  • 3、复制solr.war到tomcat/webapp下
    1. cd /usr/local/solr/solr-4.10.3/example/webapps/
    2. cp solr.war /usr/local/solr/tomcat/webapps/
  • 4、启动tomcat让solr.war自动解压
    1. /usr/local/solr/tomcat/bin/startup.sh
  • 5、关闭tomcat
    1. /usr/local/solr/tomcat/bin/shutdown.sh
  • 6、进入到webapps删除solr.war包
    1. cd /usr/local/solr/tomcat/webapps/
    2. rm -rf solr.war
  • 7、将solr-4.10.3/example/lib/ext/目录下的所有jar包拷贝到/usr/local/solr/tomcat/webapps/solr/WEB-INF/lib目录中
    1. cd /usr/local/solr/solr-4.10.3/example/lib/ext
    2. cp *  /usr/local/solr/tomcat/webapps/solr/WEB-INF/lib
  • 8、将solr-4.10.3/example/目录下的solr文件夹复制到/usr/local/solr/目录下并且重命名为solrhome
    1. cd /usr/local/solr/solr-4.10.3/example/
    2. cp -r solr /usr/local/solr/
    3. mv solr solrhome
  • 9、配置tomcat/webapps/solr/WEB-INF/web.xml家的位置
    1. cd /usr/local/solr/tomcat/webapps/solr/WEB-INF/
    2. vim web.xml
    3. 添加solrhome：/usr/local/solr/solrhome

  • 10、启动tomcat
    1. /usr/local/solr/tomcat/bin/startup.sh

中文分词器

  • IK Analyzer简介
    1. IK Analyzer 是一个开源的，基亍 java 语言开发的轻量级的中文分词工具包。
    2. 它是以开源项目Luence为应用主体的，结合词典分词和文法分析算法的中文分词组件
    3. IK实现了简单的分词歧义排除算法，标志着IK分词器从单纯的词典分词向模拟语义分词衍化。
    4. 作用:有中文语义分析的效果,对中文分词效果好.
  • IK Analyzer(配置)
    1. 1、把IKAnalyzer2012FF_u1.jar添加到solr工程的lib目录下
      1. cd /usr/local/solr/IKAnalyzer/
      2. cp IKAnalyzer2012FF_u1.jar /usr/local/solr/tomcat/webapps/solr/WEB-INF/lib/
  1. 2、创建WEB-INF/classes文件夹
    1. cd /usr/local/solr/tomcat/webapps/solr/WEB-INF/
    2. mkdir classes
  2. 3、把扩展词典、停用词词典、配置文件放到 solr 工程的 WEB-INF/classes 目录下
  1. cd /usr/local/solr/tomcat/webapps/solr/WEB-INF/classes
  2. cp /usr/local/solr/IKAnalyzer/IKAnalyzer.cfg.xml ./
  3. cp /usr/local/solr/IKAnalyzer/ext_stopword.dic ./
  4. mv ext_stopword.dic stopword.dic
  5. 4、修改IKAnalyzer.cfg.xml配置文件
    2. stopword.dic已经有了,ext.dic还没有
    3. 创建ext.dic：touch ext.dic
    4. stopword.dic-停止词典：切分词的时候,凡是出现在停止词典中的词都会被过滤掉.
    5. ext.dic-扩展词典：凡是专有名词都会放到这里,如果自然语义中不是一个词, 放到这里后solr切分词的时候就会切分成一个词.
  1. 5、配置分词器
    1. 修改 Solrhome 的 schema.xml 文件：
      1. cd /usr/local/solr/solrhome/collection1/conf
      2. vim schema.xml
      3. 在最后添加
<fieldType name="text_ik" class="solr.TextField">

     <analyzer class="org.wltea.analyzer.lucene.IKAnalyzer"/>

</fieldType>

  1. 自定义域名使用自己创建的分词器
<field name="content_ik" type="text_ik" indexed="true" stored="true"/>

  1. 6、配置完毕后重启tomcat：在浏览器进行访问http://192.168.1.9:8080/solr

域的分类

  • 什么是域
    1. 域相当于数据库的表字段，用户存放数据
    2. 用户根据业务需要去定义相关的Field（域）
  • 域的分类:

    field普通域：大多数情况都可以用这个域来完成,主要定义了域名和域的类型.

    copyField复制域：复制域中有source叫做源域,dest代表目标域,在维护数据的时候,源域中的内容会复制到目标域中一份,从目标域中搜索,就相当于从多个源域中搜索一样。

    dynamicField动态域：solr中域名要先定义后使用,没有定义就使用会报错如果没有定义的域名想使用可以模糊匹配动态域,让没有定义的域名可以使用。

    uniqueKey主键域：在添加数据的时候必须有主键域,没有会报错,这个不用添加也不用修改,就使用这个默认的域名id就可以.

  • 域的常用属性
    1. name：指定域的名称
    2. type：指定域的类型
    3. indexed：是否索引
    4. stored：是否存储
    5. required：是否必须
    6. multiValued：是否多值
  • 普通域 
    1. <field name="content_ik" type="text_ik" indexed="true" stored="true"/>
<field name="item_goodsid" type="long" indexed="true" stored="true"/>
<field name="item_title" type="text_ik" indexed="true" stored="true"/>
<field name="item_price" type="double" indexed="true" stored="true"/>
<field name="item_image" type="string" indexed="false" stored="true"/>
<field name="item_category" type="string" indexed="true" stored="true"/>
<field name="item_seller" type="text_ik" indexed="true" stored="true"/>
<field name="item_brand" type="string" indexed="true" stored="true"/>
<field name="item_updatetime" type="date" indexed="true" stored="true"/>

       

  • 复制域 
    1. <field name="item_keywords" type="text_ik" indexed="true" stored="false" multiValued="true"/>
<copyField source="item_title" dest="item_keywords"/>
<copyField source="item_category" dest="item_keywords"/>
<copyField source="item_seller" dest="item_keywords"/>
<copyField source="item_brand" dest="item_keywords"/>

       

  • 动态域 
    1. <dynamicField name="item_spec_*" type="string" indexed="true" stored="true"/>

       

Solrj

  • 概述

solrJ是solr官方推出的客户端工具包,将solrj的jar包放到我们项目中,我们调用solrj中的api来远程给solr服务器发送命令,solr服务器就可以完成对索引库的操作(添加修改删除查询).

  • 操作步骤
    1. 创建一个普通的Java工程
    2. 添加soloJ相关Jar包
    3. 添加或者修改(修改时,会把以前的内容删除,然后再添加)
    4. 查询所有
    5. 删除

Spring Data Solr

  • Spring Data Solr简介
    1. Spring Data Solr就是为了方便Solr的开发所研制的一个框架
    2. 其底层是对SolrJ（官方API）的封装
  • Spring Data Solr入门
    1. 创建maven工程SpringSolrProject  jar项目
    2. 2.pom.xml中引入依赖
<properties>

        <spring.version>5.1.7.RELEASE</spring.version>

    </properties>


    <dependencies>

        <dependency>

            <groupId>org.springframework</groupId>

            <artifactId>spring-context</artifactId>

            <version>${spring.version}</version>

        </dependency>

        <dependency>

            <groupId>org.springframework</groupId>

            <artifactId>spring-beans</artifactId>

            <version>${spring.version}</version>

        </dependency>

        <dependency>

            <groupId>org.springframework</groupId>

            <artifactId>spring-webmvc</artifactId>

            <version>${spring.version}</version>

        </dependency>

        <dependency>

            <groupId>org.springframework</groupId>

            <artifactId>spring-jdbc</artifactId>

            <version>${spring.version}</version>

        </dependency>

        <dependency>

            <groupId>org.springframework</groupId>

            <artifactId>spring-aspects</artifactId>

            <version>${spring.version}</version>

        </dependency>

        <dependency>

            <groupId>org.springframework</groupId>

            <artifactId>spring-jms</artifactId>

            <version>${spring.version}</version>

        </dependency>

        <dependency>

            <groupId>org.springframework</groupId>

            <artifactId>spring-context-support</artifactId>

            <version>${spring.version}</version>

        </dependency>

        <dependency>

            <groupId>org.springframework</groupId>

            <artifactId>spring-test</artifactId>

            <version>${spring.version}</version>

        </dependency>



        <dependency>

            <groupId>org.springframework.data</groupId>

            <artifactId>spring-data-solr</artifactId>

            <version>1.5.5.RELEASE</version>

        </dependency>

        <dependency>

            <groupId>org.springframework</groupId>

            <artifactId>spring-test</artifactId>

            <version>5.1.7.RELEASE</version>

        </dependency>

        <dependency>

            <groupId>junit</groupId>

            <artifactId>junit</artifactId>

            <version>4.12</version>

        </dependency>

        <dependency>

            <groupId>javax.servlet</groupId>

            <artifactId>servlet-api</artifactId>

            <version>2.5</version>

        </dependency>

        <dependency>

            <groupId>org.projectlombok</groupId>

            <artifactId>lombok</artifactId>

            <version>1.18.6</version>

        </dependency>

</dependencies>
  1. 3.在src/main/resources下创建：applicationContext-solr.xml
<?xml version="1.0" encoding="UTF-8"?>

<beans xmlns="http://www.springframework.org/schema/beans"

       xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:p="http://www.springframework.org/schema/p"

       xmlns:context="http://www.springframework.org/schema/context"

       xmlns:solr="http://www.springframework.org/schema/data/solr"

       xsi:schemaLocation="http://www.springframework.org/schema/data/solr

               http://www.springframework.org/schema/data/solr/spring-solr-1.0.xsd

                  http://www.springframework.org/schema/beans

                  http://www.springframework.org/schema/beans/spring-beans.xsd

                  http://www.springframework.org/schema/context

                  http://www.springframework.org/schema/context/spring-context.xsd">

    <!-- solr服务器地址 -->

    <solr:solr-server id="solrServer" url="http://192.168.1.88:8080/solr" />


    <!-- solr模板，使用solr模板可对索引库进行CRUD的操作 -->

    <bean id="solrTemplate" class="org.springframework.data.solr.core.SolrTemplate">

        <constructor-arg ref="solrServer" />

    </bean>

</beans>
  1. 4.创建 cn.fmjava.pojo 包 引入 Item实体类
/**

 * @author cpm

 */

@Data

public class Item implements Serializable {

    /**

     * 商品id，同时也是商品编号

     */

    @Field

    private Long id;


    /**

     * 商品标题

     */

    @Field("item_title")

    private String title;


    /**

     * 商品卖点

     */

    private String sellPoint;


    /**

     * 商品价格，单位为：元

     */

    @Field("item_price")

    private BigDecimal price;


    private Integer stockCount;


    /**

     * 库存数量

     */

    private Integer num;


    /**

     * 商品条形码

     */

    private String barcode;


    /**

     * 商品图片

     */

    @Field("item_image")

    private String image;


    /**

     * 所属类目，叶子类目

     */

    private Long categoryid;


    /**

     * 商品状态，1-正常，2-下架，3-删除

     */

    private String status;


    /**

     * 创建时间

     */

    private Date createTime;


    /**

     * 更新时间

     */

    @Field("item_updatetime")

    private Date updateTime;


    private String itemSn;


    private BigDecimal costPirce;


    private BigDecimal marketPrice;


    private String isDefault;


    @Field("item_goodsid")

    private Long goodsId;


    private String sellerId;


    private String cartThumbnail;


    @Field("item_category")

    private String category;


    @Field("item_brand")

    private String brand;


    private String spec;


    @Field("item_seller")

    private String seller;


    @Dynamic

    @Field("item_spec_*")

    private Map<String,String> specMap;


    public Map<String, String> getSpecMap() {

        return specMap;

    }


    public void setSpecMap(Map<String, String> specMap) {

        this.specMap = specMap;

    }

    private static final long serialVersionUID = 1L;


}
  1. 5.配置业务域
  1. 修改solrhome的schema.xml 文件  设置业务系统 Field
<field name="item_goodsid" type="long" indexed="true" stored="true"/>

<field name="item_title" type="text_ik" indexed="true" stored="true"/>

<field name="item_price" type="double" indexed="true" stored="true"/>

<field name="item_image" type="string" indexed="false" stored="true" />

<field name="item_category" type="string" indexed="true" stored="true" />

<field name="item_seller" type="text_ik" indexed="true" stored="true" />

<field name="item_brand" type="string" indexed="true" stored="true" />

<field name="item_updatetime" type="date" indexed="true" stored="true" />
  1. 复制域的作用在于将某一个Field中的数据复制到另一个域中
<field name="item_keywords" type="text_ik" indexed="true" stored="false" multiValued="true"/>

<copyField source="item_title" dest="item_keywords"/>

<copyField source="item_category" dest="item_keywords"/>

<copyField source="item_seller" dest="item_keywords"/>

<copyField source="item_brand" dest="item_keywords"/>
  1. 动态扩充字段时，我们需要使用动态域
<dynamicField name="item_spec_*" type="string" indexed="true" stored="true" />

  1. 配置：
    1. cd /usr/local/solr/solrhome/collection1/conf
    2. vim schema.xml
  2. 重启tomcat 
    /usr/local/solr/tomcat/bin/shutdown.sh
/usr/local/solr/tomcat/bin/startup.sh

     

  3. 6.在实体类字段上添加@Field注解
  4. 7.创建测试类
    1. 添加
    2. 删除
    3. 查询
    4. 示例代码
@RunWith(SpringJUnit4ClassRunner.class)

@ContextConfiguration(locations = {"classpath:applicationContext-solr.xml"})

public class TestSolr {

    @Autowired

    private SolrTemplate solrTemplate;

    @Test

    public void addItem(){

        /*Item item = new Item();

        item.setId(1L);

        item.setBrand("brand");

        item.setCategory("Category");

        item.setPrice(new BigDecimal("100"));

        item.setTitle("title123");

        item.setImage("aaaa");

        solrTemplate.saveBean(item);

        solrTemplate.commit();*/


        ArrayList arrayList = new ArrayList();

        for (long i=2; i < 100;i++){

            Item item = new Item();

            item.setId(i);

            item.setBrand("brand"+i);

            item.setCategory("Category"+i);

            item.setPrice(new BigDecimal("100"+i));

            if (i % 2 ==0){

                item.setTitle("鲁班"+i);

            }else {

                item.setTitle("title123"+i);

            }

            item.setImage("aaaa"+i);

            arrayList.add(item);

        }

        solrTemplate.saveBeans(arrayList);

        solrTemplate.commit();



    }



    @Test

    public void testDelete(){

        /*solrTemplate.deleteById("1");

        solrTemplate.commit();*/

        SimpleQuery simpleQuery = new SimpleQuery("*:*");

        solrTemplate.delete(simpleQuery);

        solrTemplate.commit();

    }


    @Test

    public void testQuery(){

        SimpleQuery simpleQuery = new SimpleQuery("*:*");

        //设置分页

        simpleQuery.setOffset(95); //从哪条记录开始查

        simpleQuery.setRows(5);//本次查询多少条记录

        ScoredPage<Item> items = solrTemplate.queryForPage(simpleQuery, Item.class);

        //总页数

        int totalPages = items.getTotalPages();

        System.out.println("totalPages="+totalPages);

        //总记录数

        long totalElements = items.getTotalElements();

        System.out.println("totalElements="+totalElements);

        //本次查询的记录数

        int numberOfElements = items.getNumberOfElements();

        System.out.println("numberOfElements="+numberOfElements);

        //本次查询的数据

        List<Item> content = items.getContent();

        for (Item item : content) {

            System.out.println(item.getTitle());

        }

    }


    @Test

    public void testQuery2(){

        SimpleQuery simpleQuery = new SimpleQuery();

        Criteria criteria = new Criteria("item_title").contains("鲁班");

        simpleQuery.addCriteria(criteria);

        //设置分页

        simpleQuery.setOffset(10); //从哪条记录开始查

        simpleQuery.setRows(5);//本次查询多少条记录

        ScoredPage<Item> items = solrTemplate.queryForPage(simpleQuery, Item.class);


        //本次查询的数据

        List<Item> content = items.getContent();

        for (Item item : content) {

            System.out.println(item.getTitle());

        }

    }

}

 

 

进击的小绵羊
关注
  • 1
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 2
    评论
专栏目录
solr-solrj-6.6.0.jar
08-16
solr-solrj-6.6.0.jar
solr学习之solrj
茗少的博客
05-05 271
solrJ是访问Solr服务的JAVA客户端，提供索引和搜索的请求方法，SolrJ通常嵌入在业务系统中，通过solrJ的API接口操作Solr服务。 一 .maven的环境jar包配置 <!-- https://mvnrepository.com/artifact/org.apache.solr/solr-solrj --> <dependency> ...
Solr：使用 SolrJ 操作 Solr
最新发布
qq_33240556的博客
04-07 267
Apache SolrJ 是 Solr 官方提供的 Java 客户端库，用于与 Solr 服务器进行交互，包括索引文档、执行搜索查询、管理核心（cores）等操作。
spring-data-solr和solrj的对应关系
SuperMan程序人生（关注微信公众号）
12-17 1378
solr 作为一个企业及应用，可以理解为一个搜索引擎的大体上的成品。solrj是官方为Java开发提供的。 solrj的使用是通过它提供的若干接口，而Spring Data Solr 是spring 调用solr接口的 进一步封装，简化了solr的使用，可以通过spring-data-solr提供的对象 HttpSolrServer 对文档索引的创建、搜索、分组、排序、分页等等进行操控。功能还是较...
Solr-Solrj简单使用
zym_1321的博客
04-02 2371
一、SolrJ简介 SolrJ是操作Solr的Java客户端，它提供了增加、修改、删除、查询Solr索引的Java接口。通过solrJ提供的API接口来操作solr服务，SolrJ底层是通过使用httpClient中的方法来完成Solr的操作。 二、依赖配置 <dependency> <groupId>org.apache.solr</groupId> &l...
solr系列--solrj使用
李孟的博客
06-06 1126
solrj是solr的java客户端，用于访问solr索引库。它提供了添加、删除、查询、优化等功能。 配置jar: /dist/solrj-lib下的所有jar solr-solrj-5.2.1.jar server/lib/ext下所有jar 如果Maven来构建项目，添加以下代码到你的pom.xml配置文件中 &lt;dependency&gt;          &lt;artifactId...
solr-solrj-4.9.0.jar
04-15
solr-solrj-4.9.0.jar
apache-solr-solrj-3.2.0.jar
03-08
jar包，亲测可用
apache-solr-solrj-3.6.2.jar
03-08
jar包，亲测可用
solr-solrj-6.1.0
03-12
Solr是一个独立的企业级搜索应用服务器，它对外提供类似于Web-service的API接口。用户可以通过http请求，向搜索引擎服务器提交一定格式的XML文
solr-solrj-5.5.0.jar
02-27
solrJ是Java连接solr进行查询检索和索引更新维护的jar包。
solr-solrj-4.10.3.jar和solr-solrj-5.0.0.jar
03-10
压缩文件里面有solr-solrj-4.10.3.jar和solr-solrj-5.0.0.jar两个jar
solrJ 需要的jar文件 （全）
11-17
com.springsource.org.junit-4.7.0； commons-io-2.4； commons-logging。
solr-solrj的使用
Java_feng的博客
10-14 1202
import java.io.IOException; import java.util.List; import java.util.Map;import org.apache.solr.client.solrj.SolrQuery; import org.apache.solr.client.solrj.SolrServer; import org.apache.solr.client.solr
Solr--Solr 使用SolrJ 完成添加,删除,查询
我和井盖都笑了博客
05-05 318
SolrJ 的使用     1 什么是 SolrJ       solrJ 是访问 Solr 服务的 JAVA 客户端，提供索引和搜索的请求方法，SolrJ 通常嵌入在业务系统中，通过 solrJ 的 API 接口操作 Solr 服务。     2 在Solr Schema.x...
Solr 6.3 入门教程（二） SolrJ
wyyl1的专栏
12-14 2259
Solr 6.3 SolrJ
Solr和Solrj的使用
Oscrazy的博客
05-17 1963
Solr(4.10.3)&Solrj 部署环境 1.拷贝solr solr-4.10.3\example\solr 目录到【如E:/solr/】,重命名solr为solrhome 【E:/solr/solrhome】 solrhome:solr里面有几个文件 ``collection1`:有一个默认名称为collection1的SolrCore索引库 conf：SolrCore运...
solr java 教程_【Solr】使用solrj管理solr
weixin_30325929的博客
02-22 117
前言搭建好了solr服务器，使用solr自带的数据导入是不现实的，我们需要在java代码中实现solr对数据的导入。导入jar包引入solr-solrj.jar(solr-4.10.3的dist目录下)操作数据1、添加数据public void addDocument() throws Exception{//创建一个SolrServer对象，创建一个连接，参数solr服务的urlSolrServ...
Solr solrj的使用
每天进步一点点 时间会让你成为巨人
12-26 4040
使用solr-4.7.2.zip\dist\solr-solrj-4.7.2.jar与solrj-lib下的所有jar；
solr-data-config.xml entity的详细配置方法
06-08
在 solr-data-config.xml 文件中，entity 用于描述数据源中的实体（entity），它定义了数据源中的表或视图、查询语句、字段映射等信息。下面是一个示例 entity 的配置： ```xml pk="id" query="SELECT id, name,...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

进击的小绵羊

c币是什么

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值