Solr的增量更新和全量更新对比

已于 2022-06-14 17:16:03 修改
阅读量3.7k 收藏 1
点赞数 1
分类专栏： solr 文章标签： solr 搜索引擎
于 2020-08-31 17:41:39 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_42941671/article/details/108324169
版权

Solr的增量更新和全量更新

solr的简介

solr是一个采用java语言，基于Lucene的全文搜索引擎。

solr的一些原理

solr通过数据库的数据导入到索引库中，并且给数据创建相应的索引，用来提高搜索的速度。而当数据库的数据发生改变我们需要来和数据库的数据进行同步的时候就用到了全量更新和增量更新

先来说一下全量更新

全量更新顾名思义就是全部都更新，当我们的索引库需要更新数据库数据的时候，就把数据全部拿过来进行更新同步。

使用全量更新

(注意这里—你的文件名可能会因为solr版本问题而和我的文件名不一样)
1.配置solrconfig.xml文件
在这里插入图片描述
2.配置solr-data-config.xml文件(数据源配置文件)
在这里插入图片描述
3.配置managed-schema文件
在这里插入图片描述
然后启动项目
在这里插入图片描述

以上就是全量更新

再来说一下增量更新
增量更新简单来说就是，比如数据库的数据发生修改我们就只导入更新修改的数据，比全量更新操作量少

操作步骤也很简单
1.配置solr-data-config.xml文件(数据源配置文件)
在这里插入图片描述
2.重启项目
在这里插入图片描述
在这里我数据库的数据没有改变，所以没有显示更新了几条数据

以上就是增量更新和全量更新

少i年
关注
专栏目录
全文检索Solr面试题集锦：项目实战VS理论知识
十年呵护的专栏
04-23 1172
一、前言 在Solr专栏中，更新完项目实战课程，结合常用技能点和面试高频题汇总下这方面的知识。 Solr专栏是一个专为初级程序员不职场打造的项目实战专栏，利用项目实战经验，突破面试获得高薪 很多学子刚毕业步入社会，大部分并未参加培训很不占优势，利用仅有的学校实训项目很难获得一份如意工作 所以项目之后，即是面试考点精选汇总，用心整理，欢迎小伙伴 转发+关注 二、开胃小故事 Solr是...
solr全量更新和增量更新，定时增量更新详解
JavadeSon的博客
08-27 3494
这里写自定义目录标题一、全量更新（1）什么是全量更新？（2）全量更新的配置【1】核心目录下创建一个data-config.xml文件：【2】核心的conf文件夹下的solrconfig.xml文件，在第一个requestHandler标签上面添加：【3】核心的conf文件夹下的managed-schema文件，在第一个field标签上面添加：【4】到solr后台管理页面，选择全量更新的选项，点击Execute二、增量更新（1）什么是增量更新？（2）为什么需要增量更新？（3）增量更新的配置【1】首先要弄懂几个
solr—全量更新与增量更新
weixin_46884775的博客
09-01 545
全量更新和增量更新区别。 全量更新，就是所有参数都传给后台，全部入库。 增量更新，则是传一部分参数，然后更新传递的参数。 以上两点是通过sql语句区分的， 而传null和空串，对于后台来说是不同的。 增量更新、后台一般要！=null才入库。 在增量更新的情况下。 前端更新数据，如果某个参数的值没有改变，可以传之前的参数，或者不传该参数，或者传null。 但是不能传空串。 传空串会改变数据库里的值。 而据后台说。 oracle 数据库里，空串和null是一样的，即空串入库，库里变成了null。 1
数据仓库系列13：增量更新和全量更新有什么区别,如何选择?
最新发布
一个8年大数据开发工程师的碎碎念
08-29 2195
今天，让我们深入探讨这个数据仓库领域的核心问题，揭示增量更新和全量更新的秘密，帮助你在实际工作中做出明智的选择。
Solr 的全量更新与增量更新
weixin_50048212的博客
08-26 1389
Solr 的全量更新与增量更新 1.全量更新 全量，这个很好理解。就是每天定时（避开业务高峰期）或者周期性全量把数据从一个地方拷贝到另外一个地方； 全量的话，可以采用直接全部覆盖（使用“新”数据覆盖“旧”数据）；或者走更新逻辑（覆盖前判断下，如果新旧不一致，就更新）； 这里面有一个隐藏的问题：如果采用异步写，主数据物理删除了，怎么直接通过全量数据同步？这就需要借助一些中间操作日志文件，或者其他手段，把这些“看不到”的数据记录起来。 2.增量更新 增量的基础是全量，就是你要使用某种方式先把全量数据拷贝过来，然
Solr连接MySQL数据库实现 全量更新、增量更新、定时增量更新
dongyan3595的博客
05-05 2446
Solr的增量更新与定时增量更新
solr配置增量更新
08-16
- *2* [Solr的增量更新和全量更新对比](https://blog.csdn.net/qq_42941671/article/details/108324169)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_...
Solr7.4.0应用部署Demo，比较全面完整，亲测有效
h0713的博客
09-07 3968
本文参考： http://www.cnblogs.com/tony-zt/p/9260017.html http://www.importnew.com/12707.html https://blog.csdn.net/wzy18210825916/article/details/80946454 https://blog.csdn.net/column/details/17959.htm...
企业级搜索引擎Solr再次焕发青春
Lucene/Solr解密
10-29 443
今天非常高兴地向大家宣布一个消息，TIS2.0经过一年多时间的代码开发，终于将开发分支代码合并到了主干上分支上。 他是一款基于SOLR的具有高性能、高可靠、高扩展性的企业级、一站式搜索中台产品，利用TIS可快速为您构建企业级搜索服务。 想通过这篇博客向大家简要地介绍TIS的前世今生，如果可以对各位日常工作中构建企业搜索应用有所帮助，那真是不胜荣幸。 TIS功能特性 离线数仓负责索引实例全量数据构建，将关系数据库中的ER实体按照要求打平成为一张宽表导入搜索引擎（这部分底层可以TIS的插件机制方便地切换各种成熟
Solr高效利用：Solr实现SQL的查询与统计
mxdxm8899的专栏
03-11 505
  Cloudera公司已经推出了基于Hadoop平台的查询统计分析工具Impala，只要熟悉SQL，就可以熟练地使用Impala来执行查询与分析的功能。不过Impala的SQL和关系数据库的SQL还是有一点微妙地不同的。 下面，我们设计一个表，通过该表中的数据，来将SQL查询与统计的语句，使用Solr查询的方式来与SQL查询对应。这个翻译的过程，是非常有趣的，你可以看到Solr一些很不错的功...
增量更新 差异更新
11-05
差异更新demo。 还不错，不过得自己研究NDK，生成自己的jni文件来使用，很简单的方法调用。
kettle数据抽取全量对比
10-26
kettle数据清洗抽取，全量对比记录，包含列转行，增加序列，字段拆分，对比记录
solr全量更新和增量更新
WeiLan_的博客
08-30 1163
solr全量更新和增量更新 1.首先理解更新 数据库中的数据导入solr缓存中就是更新。 2.全量更新 全量更新，就是把数据库中的全部数据都导入solr缓存库中，一般会删除solr缓存库现有的数据。 全量的话，可以采用直接全部覆盖（使用“新”数据覆盖“旧”数据）；或者走更新逻辑（覆盖前判断下，如果新旧不一致，就更新）； 1.core/conf 目录下的 solrconfig.xml，新增如下配置 <requestHandler name="/dataimport" class="solr.DataIm
全量更新和增量更新_增量BIOS更新或直接更新到最新版本哪个更好？
cum43546的博客
09-18 1161
全量更新和增量更新There are few things as irritating as a Blue Screen of Death, but sometimes there is an easy fix for it like updating the BIOS for instance. If multiple updates are available though, do you d...
关于增量更新 全量更新的思路历程
热门推荐
苏公子的博客
01-24 1万+
背景：调第三方接口调取全部数据存入数据库（数据量较大）。之后都是操作数据库。 这时需要定时任务。定时调api获取最新的数据。更新到数据库。   目的：更新页面显示内容信息。   思路： 差分更新 拉取更新数据更新数据库。 以页面显示数据为基础到表中查是否有更新数据。有则更新。没有则不做操作。   具体做法： 建个表存接口返回数据。 1 数据初始化：清空表里数据。拉取接口全部...
Oracle ~ merge into 函数 (增量更新、全量更新)
cai_and_luo的博客
12-04 1448
Oracle merge into 函数 增量更新、全量更新 1、数据导入功能，存在全量更新/增量更新的问题，简单记录使用 oracel 的 merge into 函数。 2、全量更新（覆盖模式）：数据库存在该条数据时，做更新操作。不存在时，做新增操作 3、增量更新（跳过模式）：数据库存在该条数据时，不做任何操作，不存在时，做新增操作。 4、merge into 对千万级以上的数据更新，速度比较慢。 merge into 使用 merge into [target-table] A using [
solr 的全量更新与增量更新
xiang1186的博客
08-26 387
solr 的全量更新与增量更新solr 的全量更新简介详细过程solr 的增量更新简介详细配置最后感谢大家的观看！ solr 的全量更新与增量更新solr 的全量更新简介详细过程solr 的增量更新简介详细配置最后感谢大家的观看！solr 的增量更新 solr 的全量更新与增量更新solr 的全量更新简介详细过程solr 的增量更新简介详细配置最后感谢大家的观看！olr 的全量更新与增量更新) solr 的全量更新 简介 当我们访问购物网站的时候，我们可以根据我们随意所想的内容输入关键字就可以查询出相关的内
Solr的增量更新和全量更新介绍
Septemberer的博客
09-08 411
Solr的增量更新和全量更新介绍 一、solr 的全量更新 1.core/conf 目录下的 solrconfig.xml，新增如下配置 <!--添加如下配置 增加resultHandler配置 --> <requestHandler name="/dataimport" class="org.apache.solr.handler.dataimport.DataImportHandler"> <lst name="defaults"> <str
Java代码实现solr增量更新
06-06
Solr是一个强大的搜索引擎，支持增量更新，可以通过Java代码...总的来说，使用Java代码实现Solr增量更新非常简单，只需要创建SolrClient对象、SolrInputDocument对象和UpdateRequest对象，然后执行增量更新操作即可。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值