springcloud基于solr8的pdf索引创建

solr8基于tika创建pdf索引

1.在solrconfig.xml添加如下

2.新建data-config.xml并添加如下内容

<?xml version="1.0" encoding="UTF-8" ?>
<dataConfig>
  <dataSource type="BinFileDataSource"/>
  <document>
   <entity name="file" processor="FileListEntityProcessor" dataSource="null"
            baseDir="/home/peiyajie/solr-8.5.2/example/exampledocs" fileName=".*pdf"
            rootEntity="false" onError="skip" recursive="true">
        <field column="fileAbsolutePath" name="id" />
        <field column="fileSize" name="size" />
        <field column="fileLastModified" name="lastModified" />
        <entity name="tika-test" dataSource="bin" processor="TikaEntityProcessor"
                url="${file.fileAbsolutePath}" format="text" onError="skip">                
            <field column="Author" name="author" meta="true"/>
            <field column="title" name="title" meta="true"/>
            <field column="dc:format" name="format" meta="true"/>
            <field column="text" name="content"/>                            
        </entity>      
    </entity>
  </document>
</dataConfig>
说明:file名称的entity是轮询当前文件夹下面所有文件,如果你只导入一个直接用子entity指定绝对路径即可

3.managed-schema添加如下

    <field name="content" type="text_ik" indexed="true" stored="true" omitNorms="true" multiValued="false"/>
<field name="author" type="text_ik" indexed="true" stored="true"/>
<field name="title" type="text_ik" indexed="true" stored="true"/>
<field name="fileName" type="string" indexed="true" stored="true"/>
<field name="filePath" type="string" indexed="true" stored="true" multiValued="false"/>
<field name="size" type="plong" indexed="true" stored="true"/>
<field name="lastModified" type="pdate" indexed="true" stored="true"/>
注意text_ik是上篇文章添加的中文分析器

4.很重要的一步需要将tiak的jar(contrib/extraction/lib)及相关依赖包传入WEB-INF/lib下面

cp /home/peiyajie/solr-8.5.2/contrib/extraction/lib/*.jar  /home/peiyajie/solr-8.5.2/server/solr-webapp/webapp/WEB-INF/lib

如果没有传过,还需要再传

home/peiyajie/solr-8.5.2/dist/solr-dataimporthandler-.*\.jar

即可完成

要不然debug模式会报:

null:java.lang.RuntimeException: java.lang.NoClassDefFoundError: org/apache/tika/parser/Parser

注意:debug模式日志清晰,file就是刚才entity指定的名称

         

 

 

 

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值