linux环境下解决solr7.4服务器多表导入数据覆盖的问题

问题溯源(导致solr数据覆盖可能原因):

因为是多表的原因,可能在将mysql数据库导入到solr索引库中会出现不同数据相同id,而在solr实例schema配置会将id作为solr索引库的主键id,这样因为id的相同会导致不同的数据覆盖,丢失数据

解决方法(不是唯一):

1.在solrhome实例schema配置中添加

<fieldType name="uuid" class="solr.UUIDField" indexed="true"/> 
<field name="uuid" type="uuid" indexed="true" stored="true" required="true"/>

2.在solrhome实例schema配置中修改

<uniqueKey>uuid</uniqueKey>(uuid原本为id)
<field name="_root_" type="uuid" docValues="false" indexed="true" stored="false"/>(type属性默认为string,要与主键id属性保持一致)

3.在solrconfig.xml文件中添加

<requestHandler name="/dataimport" class="solr.DataImportHandler">
    <lst name="defaults">
      <str name="config">data-config.xml</str>
      <str name="update.chain">uuid</str>(新添加的)
    </lst>
  </requestHandler>

再添加

<updateRequestProcessorChain name="uuid">
    <processor class="solr.UUIDUpdateProcessorFactory">
        <str name="fieldName">uuid</str>
    </processor>
    <processor class="solr.RunUpdateProcessorFactory" />
</updateRequestProcessorChain>

最后重启solr服务器,数据重新导入

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值