需要用到key-value store indexer
key-value store indexer 是一个基于hbase的replication特性而实现的能够动态的将hbase的二级索引同步给solr的组件,并且可以批量导入索引,增量同步索引,同步时延比较小,几乎近实时,好东西
-
Hbase表需要开启REPLICATION复制功能实现集群间的相互复制
创建表
create ‘test’,{NAME=>‘c1’,REPLICATION_SCOPE => ‘1’}
其中1表示开启replication功能,0表示不开启,默认为0 -
对于已经创建的表可以使用如下命令
disable ‘table’ alter ‘table’,{NAME => ‘info’, REPLICATION_SCOPE => 1}
enable 'table’ -
生产配置文件 使用CDH自带的solr命令 solrctl
generate后面为自定义路径
solrctl instancedir --generate /opt/cdhsolr/test -
在test目录下会有一个conf文件夹,修改managed-schema文件,文件名也可能是schema.xml
添加:
< field name=“test3name” type=“string” indexed=“true” stored=“true” />
name:这里的name是自定义,但是后面要使用到,要和后面的Morphline.conf文件中的