Solr和Solrj的使用

Solr(4.10.3)&Solrj

部署环境

1.拷贝solr

solr-4.10.3\example\solr 目录到【如E:/solr/】,重命名solr为solrhome 【E:/solr/solrhome】

• solrhome:solr里面有几个文件

  • ``collection1`:有一个默认名称为collection1的SolrCore索引库
    • conf：SolrCore运行配置信息
      • conf/solrconfig.xml:配置SolrCore实例的相关信息

   	...(配置见 #配置solrconfig.xml)
  

  - <font color=red>	`conf/schema.xml`:主要用于配置域的类型（FieldType）和配置域（Field）**根据数据库决定**</font>
  

   	...(配置见 #配置schema.xml)
  

  • data：SolrCore存放日志和索引文件的目录
  • core.properties：SolrCore的信息，比如：名称

2.拷贝solr.war并解压

1. 从solr解压包下的solr-4.10.3\example**\webapps目录中拷贝solr.war**，到tomcat的webapps目录并解压【…webapps/solr/】
2. 把solr解压包下solr-4.10.3\example**\lib\ext目录下的所有jar包拷贝到Tomcat部署的solr的WEB-INF/lib**文件夹
3. 把solr解压包下solr-4.10.3\example**\resources\log4j.properties文件，复制到Tomcat的webapps\solr\WEB-INF\classes**目录下

• tomcat/webapps/solr : #1 . 解压完成

  • WEB-INF
    • IK分词器jar包和配置文件:后面分词会用到
    • lib

  #2 . example\lib\ext的包拷贝到这里

  

  • classes:如果没有这个文件夹就新建一个

  #3.\resources\log4j.properties拷贝到这里

  

  • web.xml:配置SolrHome的路径(大概在41行左右)

   <env-entry>
       <env-entry-name>solr/home</env-entry-name>
       <!--在这里配置-->
       <env-entry-value>E:/solr/solrhome</env-entry-value>
       <env-entry-type>java.lang.String</env-entry-type>
   </env-entry>
  

---

配置schema.xml

schema.xml配置文件在 solr/collection1/conf/

主要域

版本号

<!-- 版本号(必须) -->
<field name="_version_" type="long" indexed="true" stored="true"/>

配置域

<!-- 配置域
    *name：域的名称 --- 对应数据库字段的名字
    *type：域的类型(决定是否分词) --- 对应数据库字段对应的类型
    *indexed：是否索引
    *stored：是否存储
    required：是否必须（如果为true添加索引的时候，文档对象中必须要包含该域）
    mulitValued：是否多值（可以允许一个域保存多个值，比如保存多个QQ好友）
-->
<field name="id" type="string" indexed="true" stored="true" 
required="true" multiValued="false"/> 
<field name="title1" type="string" indexed="true" stored="true"/>
<field name="title2" type="text" indexed="true" stored="true"/>

动态域

<!-- 动态域,*表示匹配任意字符串,如匹配product_i -->
<dynamicField name="*_i"  type="int" indexed="true"  stored="true"/>

唯一约束域

<!-- 唯一约束域,相当于关系数据库中的主键 -->
<uniqueKey>id</uniqueKey>

复制域

<!-- 复制域copyField
	允许将多个域的值复制给一个域，方便执行搜索。
	目标域的定义必须要包含一个属性：multiValued="true"
    source：源域的名称
    dest：目标域的名称
-->
<!--keywords = title1 + title2-->
<field name="keywords" type="text_ik" indexed="true" 
       stored="false" multiValued="true"/>
<copyField source="title1" dest="keywords"/>
<copyField source="title2" dest="keywords"/>

配置域的类型

<!-- 配置域的类型
    *name：域的类型名称
    *class：域的类型，solr中的类型
    analyzer：指定分词器，index是索引流程；query是检索流程
    tokenizer：具体使用的分词器
    filter：具体使用的过滤器
-->
<fieldType name="string" class="solr.StrField"/>
<fieldType name="boolean" class="solr.BoolField"/>
<fieldType name="int" class="solr.TrieIntField"/>
<fieldType name="float" class="solr.TrieFloatField"/>
<fieldType name="long" class="solr.TrieLongField"/>
<fieldType name="double" class="solr.TrieDoubleField"/>
<fieldType name="date" class="solr.TrieDateField"/>
<fieldType name="text_ik" class="solr.TextField">
    <!-- 配置IK分词器 -->
    <analyzer class="org.wltea.analyzer.lucene.IKAnalyzer"/>
</fieldType>

---

拷贝IK分词器jar包和配置文件

拷贝到solr/WEB-INF/classes目录下

<!-- 配置使用IK分词器的域 -->
<field name="content_ik" type="text_ik" indexed="false" 
       stored="true"multiValued="false"/>

<!-- 配置使用IK分词器的域类型 -->
<fieldType name="text_ik" class="solr.TextField" >
     <analyzer class="org.wltea.analyzer.lucene.IKAnalyzer"/>
</fieldType>

配置solrconfig.xml

solrconfig.xml配置文件在/collection1/conf/中

1.配置lib标签，加载jar包

<!-- 加载一些扩展的jar(大概在75行左右)
	${solr.install.dir}相当于solrhome目录 E:/solr/solrhome
-->
<lib dir="${solr.install.dir}/lib/" regex=".*\.jar" />

2.配置域名城

<!-- 配置搜索处理器(大概在827行) -->
<requestHandler name="/select" class="solr.SearchHandler">
    <lst name="defaults">
        <str name="echoParams">exp
            licit</str>
        <int name="rows">10</int>
        <!--默认域名称-->
        <str name="df">keyword</str>
    </lst>
...

3.配置数据请求处理器

<requestHandler name="/dataimport" 
		class="org.apache.solr.handler.dataimport.DataImportHandler">
	<lst name="defaults">
        <!-- 配置文件 -->
		<str name="config">data-config.xml</str>
	</lst>
</requestHandler>

4.创建 data-config.xml

创建在/collection1/conf/中,(和solrconfig.xml同级目录)

配置JDBC的数据源和域与数据库表的关系

<?xml version="1.0" encoding="UTF-8"?>  
<dataConfig>  
	<!--配置连接数据库信息-->
	<dataSource type="JdbcDataSource"   
		  driver="com.mysql.jdbc.Driver"   
		  url="jdbc:mysql://127.0.0.1:3306/solr"   
		  user="root"   
		  password="root"/>   
	<document>  
		<!--配置sql语句中的字段，与solr索引库的域的对应关系-->
		<entity name="user" query="SELECT id,title1,title2 FROM tableName">
			 <field column="id" name="id"/> 
			 <field column="title1" name="title1"/> 
			 <field column="title2" name="title2"/> 
		</entity>   
	</document> 
</dataConfig>

Solrj使用

1.导入依赖

<dependency>
    <groupId>org.apache.solr</groupId>
    <artifactId>solr-solrj</artifactId>
    <version>4.10.3</version>
</dependency>
<!-- commons-logging -->
<dependency>
    <groupId>commons-logging</groupId>
    <artifactId>commons-logging</artifactId>
    <version>1.1.3</version>
</dependency>

2.创建实体类

public class User {
    @Field("id")	//和数据库字段名相同可以省略不写
    private String id;
    @Field
    private String title1;
    @Field("title2")	
    private String title2;
    /** setter and getter method */
}

3.运行测试

public class SolrTest {
    /** 定义SolrServer，用来操作Solr */
    private SolrServer solrServer = new
            HttpSolrServer("http://127.0.0.1:8080/solr/collection1");
    ...
}

添加或修改索引

/** 添加或修改索引 */
@Test
public void saveOrUpdate() throws Exception{
    User user = new User();
    user.setId("1");
    user.setTitle1("osc");
    user.setTitle1("zzy");
    solrServer.addBean(user);
    // 提交事务
    solrServer.commit();
}

删除索引

/** 根据id删除索引 */
@Test
public void deleteById() throws Exception{
    solrServer.deleteById("1");
    // 提交事务
    solrServer.commit();
}

/** 根据条件删除 */
@Test
public void deleteByQuery() throws Exception{
    // 删除条件: name:osc
    //solrServer.deleteByQuery("title1:osc");
    // 删除全部
    solrServer.deleteByQuery("*:*");
    // 提交事务
    solrServer.commit();
}

查询索引

/** 查询全部索引 */
@Test
public void queryAll() throws Exception{
    // 创建SolrQuery封装查询条件
    SolrQuery sq = new SolrQuery("*:*");
    // 设置分页开始记录数
    sq.setStart(0);
    // 设置每页显示记录数
    sq.setRows(10);
    // 执行搜索，得到查询响应对象
    QueryResponse response = solrServer.query(sq);
    System.out.println("搜索到得总数量：" +
                response.getResults().getNumFound());
    // 获取搜索结果，并转化成实体集合
    List<User> users = response.getBeans(User.class);
}

Spring Data Solr

1.导入依赖包

<dependency>
    <groupId>org.springframework.data</groupId>
    <artifactId>spring-data-solr</artifactId>
    <version>1.5.6.RELEASE</version>
</dependency>

2.新建实体类

配置schema.xml,solrconfig.xml步骤省略

public class User {
    @Field("id")
    private int id;
    @Field("name")
    private String name;
    @Field("age")	
    private double age;
    /** setter and getter method */
    public void setAge(BigDecimal age) {
       this.age = age.doubleValue();
    }
}

3.新建applicationContext-solr.xml

新建在项目的/resources里

<!--头文件-->
<?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans"
    xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
    xmlns:solr="http://www.springframework.org/schema/data/solr"
    xsi:schemaLocation="http://www.springframework.org/schema/data/solr
    http://www.springframework.org/schema/data/solr/spring-solr.xsd
    http://www.springframework.org/schema/beans
    http://www.springframework.org/schema/beans/spring-beans.xsd">

    <!-- 配置SolrServer -->
    <solr:solr-server id="solrServer"
                      url="http://192.168.12.131:8088/solr/collection1"/>

    <!-- 配置SolrTemplate，它可以对Solr索引库做CRUD操作 -->
    <bean id="solrTemplate"
          class="org.springframework.data.solr.core.SolrTemplate">
        <constructor-arg name="solrServer" ref="solrServer"/>
    </bean>
</beans>

4.运行测试

@RunWith(SpringJUnit4ClassRunner.class)
@ContextConfiguration(locations="classpath:applicationContext-solr.xml")
public class SolrTest {
    @Autowired
    private SolrTemplate solrTemplate;
   ...
}

添加或修改

@Test
public void saveOrUpdate(){
    User user = new User();
    user.setId(10086);
    user.setName("osc");
    user.setAge(new BigDecimal(20));
    UpdateResponse updateResponse = solrTemplate.saveBean(user);
    if (updateResponse.getStatus() == 0) {
        solrTemplate.commit();
    }else {
        solrTemplate.rollback();
    }
}

删除

@Test
public void deleteById(){
    UpdateResponse updateResponse = solrTemplate.deleteById("10086");
    if(updateResponse.getStatus() == 0) {
        solrTemplate.commit();
    }else {
        solrTemplate.rollback();
    }
}

删除全部

@Test
public void deleteAll(){
    Query query = new SimpleQuery("*:*");
    UpdateResponse updateResponse = solrTemplate.delete(query);
    if (updateResponse.getStatus() == 0) {
        solrTemplate.commit();
    }else {
        solrTemplate.rollback();
    }
}

批量添加

@Test
public void addList(){
    List<User> list = new ArrayList<>();
    for(long i = 1; i <= 100; i++){
        User user = new User();
        user.setId(10000+i);
        user.setName("osc");
        user.setAge(new BigDecimal(20));
        list.add(user);
    }
    UpdateResponse updateResponse = solrTemplate.saveBeans(list);
    if (updateResponse.getStatus() == 0) {
        solrTemplate.commit();
    }else {
        solrTemplate.rollback();;
    }
}

根据主键id查询

@Test
public void findOne(){
    User user = solrTemplate.getById(10010, User.class);
    System.out.println(user.getName());
}

带条件分页查询

@Test
public void findByPage() {
    /** 创建查询对象 */
    Query query = new SimpleQuery("*:*");
    /** 创建条件对象(标题包含2) */
    Criteria criteria = new Criteria("title").contains("2");
    /** 添加条件 */
    query.addCriteria(criteria);
    /** 设置分页开始记录数(第一页) 默认0 */
    query.setOffset(0);
    /** 设置每页显示记录数，默认10 */
    query.setRows(20);
    ScoredPage<User> page = solrTemplate.queryForPage(query,User.class);
    System.out.println("总记录数：" + page.getTotalElements());
    List<User> users = page.getContent();
}