solr—全量更新与增量更新

全量更新和增量更新区别。

  1. 全量更新,就是所有参数都传给后台,全部入库。

  2. 增量更新,则是传一部分参数,然后更新传递的参数。

以上两点是通过sql语句区分的,

而传null和空串,对于后台来说是不同的。

增量更新、后台一般要!=null才入库。

在增量更新的情况下。

前端更新数据,如果某个参数的值没有改变,可以传之前的参数,或者不传该参数,或者传null。

但是不能传空串。 传空串会改变数据库里的值。

而据后台说。

oracle 数据库里,空串和null是一样的,即空串入库,库里变成了null。

1.solr 的全量更新

  1. core/conf 目录下的 solrconfig.xml,新增如下配置
<--添加如下配置 增加resultHandler配置  -->
  1. <requestHandler  name="/dataimport"class="org.apache.solr.handler.dataimport.DataImportHandler">
        <lst name="defaults"> 
        <str name="config">data-config.xml</str> 
       </lst>  </requestHandler>

2 在core/conf 目录下的新建 data-config.xml 文件,新增如下配置

<?xml version="1.0" encoding="UTF-8" ?>
<dataConfig> 
    <!--数据源-->
    <dataSource type="JdbcDataSource"
                driver="com.mysql.jdbc.Driver"
                url="jdbc:mysql://192.168.2.10:3306/xt"
                user="root"
                password=""/>
    <document> 
        <entity name="solrTest" 
        query="SELECT fid,ftime,fcontent,ftitle,flastupdatetime FROM solrTest">
            <!--查询的数据和数据库索引意义对应column 是查询的字段name 是solr索引对应的字段-->
            <field column="fid" name="fid"/>
            <field column="ftitle" name="ftitle"/>
            <field column="fcontent" name="fcontent"/>
            <field column="flastupdatetime" name="flastupdatetime"/>
            <field column="ftime" name="ftime"/>
        </entity>
    </document> 
</dataConfig>

3.修改core/conf 目录下 managed-schema.xml 的文件,新增需要索引的列,示例:

   <field name="fid" type="string" indexed="true" stored="true" required="true" multiValued="false" /> 
    <field name="fpic" type="string" indexed="true" stored="true"  multiValued="false" /> 
    <field name="ftitle" type="string" indexed="true" stored="true" required="true" multiValued="false" /> 
    <field name="fauthor" type="string" indexed="true" stored="true"  multiValued="false" /> 
    <field name="ftime" type="string" indexed="true" stored="true"  multiValued="false" /> 
    <field name="fdesc" type="string" indexed="true" stored="true"  multiValued="false" /> 
    <field name="fcontent" type="string" indexed="true" stored="true"  multiValued="false" /> 
    <field name="flastupdatetime" type="text_general" indexed="true" stored="true" required="true" multiValued="false" /> 

4.进入solr 的后台管理,进行全量更新

在这里插入图片描述
数据库配置注意事项

1.如果只涉及添加,与修改业务,那么数据库里只需额外有一个timpstamp字段
就可以了,默认值为当前系统时间,CURRENT_TIMESTAMP
2.如果还涉及删除业务,那么数据里就需额外再多添加一个字段isdelete,int类型的
用0,1来标识,此条记录是否被删除

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Solr是一个强大的搜索引擎,支持增量更新,可以通过Java代码实现Solr增量更新增量更新是指只更新发生了改变的数据,而不是全部数据。实现方式可以通过在每个数据上添加时间戳或者版本号,当数据发生改变时,只更新时间戳或者版本号发生了改变的数据。 下面是一个使用Java代码实现Solr增量更新的示例: ```java // 创建SolrClient对象 SolrClient solrClient = new HttpSolrClient.Builder("http://localhost:8983/solr/my_core").build(); // 创建SolrInputDocument对象 SolrInputDocument document = new SolrInputDocument(); document.addField("id", "1"); document.addField("name", "new name"); document.addField("timestamp", new Date()); // 创建UpdateRequest对象 UpdateRequest updateRequest = new UpdateRequest(); updateRequest.add(document); updateRequest.setAction(AbstractUpdateRequest.ACTION.COMMIT, true, true); // 执行增量更新操作 UpdateResponse response = updateRequest.process(solrClient); solrClient.close(); ``` 在这个示例中,我们创建了一个SolrClient对象,指定了Solr服务器的地址和core名称。然后创建了一个SolrInputDocument对象,添加了需要更新的数据字段,包括id、name和timestamp。接着,我们创建了一个UpdateRequest对象,并将SolrInputDocument对象添加到UpdateRequest对象中。最后,执行增量更新操作,并关闭SolrClient对象。 需要注意的是,Solr需要在schema.xml中配置时间戳或版本号字段,以支持增量更新。在上面的示例中,我们添加了一个名为timestamp的时间戳字段,Solr会根据这个字段来判断是否需要更新数据。 总的来说,使用Java代码实现Solr增量更新非常简单,只需要创建SolrClient对象、SolrInputDocument对象和UpdateRequest对象,然后执行增量更新操作即可。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值