solor mysql_solr 同步 mysql

一、首先创建一个数据库和表

这里创建了一个表,加上了测试数据,注意这里有一个字段来记录更新时间  update_date

a20a232125894e86ec0f5610ac94f70d.png

二、修改配置文件

我们首先介绍全量同步,再介绍增量同步

990ed9e7293ce9582622a8951e72b55d.png

我的 solr 版本是 7.5 的,new_core是我创建的 core,打开 solrconfig.xml,增加如下配置

data-config.xml

然后在当前 conf 目录下创建 data-config.xml

query="SELECT id, content,object_id,type,update_date,create_date FROM ho_front_message"

>

注意:修改 mysql 连接地址和数据库名和用户名和密码

entity 标签下

-name:表名

-pk:主键名

-query:查询语句,全量同步下会同步当前表中哪些数据

-field:表子段映射,注意时间格式

以上需要同步的表子段,需要配置到 managed-schema.xml ,对于已有的字段,不需要添加,例如 id 字段

注意 type="pdate" 因为我的 solr 是7.5 版本的

三、测试数据

66a02804141c306cdfdd667ecd060c62.png

选择 full-import  全量导入

勾选 clean 表示导入之前会清空数据

entity 选择我们在data-config.xml创建的

29aaf02caebca4b9483e75e5e6bd59de.png

可以看到数据已经查询出来了

四、增量同步

修改 data-config.xml

query="SELECT id, content,object_id,type,update_date,create_date FROM ho_front_message"

deltaQuery="select id from ho_front_message where update_date > '${dih.last_index_time}'"

deltaImportQuery="select * from ho_front_message where id='${dih.delta.id}'"

deletedPkQuery="select id from ho_front_message where enable_flag='0'"

>

deltaQuery:增量索引查询主键ID

deltaImportQuery:增量索引查询导入的数据

deletedPkQuery:此操作值查询那些数据库里伪删除的数据的ID(enable_flag=0的数据)

配置完后后,打开数据库修改其中一条记录的值和update_date

update ho_front_message set content='xxxx' ,update_date=now() where id='xxx'

导入增量数据,勾选 delta-import

5da911bd37b8fc98c22a4b5280201f60.png

再次查询看看增量数据是否正确

badd3c97d40b50920d8e653a6750039e.png

删除数据就是把某条数据的 enable_flag=0 ,再操作一下增量导入

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值